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第 1 章 指数 密度 与 均匀 密度 


1.1 引 言 


在 本 书 第 1 卷 中 , 我 们 反复 讨论 了 由 很 多 小 项 之 和 所 定义 的 概率 , 并 且 利用 下 
列 形式 的 通 近 : 


Pla<x<oa~/ " f(s)dz. (1D) 


一 个 最 初 的 例子 是 二 项 分 布 的 正 态 副 近 .? 这 类 逼近 通常 以 极限 定理 的 形式 来 表述 ， 
该 定理 包含 一 系列 越 来 越 精 细 的 离散 概率 模型 . 在 许多 情形 下 , 通过 这 种 极限 在 概 
念 上 引入 一 个 新 的 样本 空间 , 而 后 者 在 直观 上 可 以 比 原来 的 离散 模型 更 简单 . 

例 (a) 指数 型 等 待 时 间 . 为 了 用 离散 模型 来 表述 等 待 时 间 , 我 们 把 时 间 离散 化 , 并 
假定 变化 仅 发 生 在 时 刻 ?6,25,…. 最 简单 的 等 待 时 间 T, 是 在 具有 成 功 概率 ps 的 伯 
努 利 (Bernoulli) 试验 序列 中 第 一 次 成 功 的 等 待 时 间 . 于 是 P{T > n6} = (1 ps)"， 
等 待 时 间 的 期 望 是 E(T) = 5/ps. 这 个 模型 的 精确 化 ,是 在 保持 期 望 值 5/ps = a 不 
变 的 条 件 下 让 5 减 小 而 得 到 . 在 长 度 为 + 的 时 间 内 , 相应 地 有 n s t/5 次 试验 , 取 对 
数 后 可 以 看 出 , 当 5 很 小 时 近似 地 有 


P{T >t} ~ (1— 6/a)!s re-t/o. (1.2) 


该 模型 把 等 待 时 间作 为 几何 分 布 的 离散 随机 变量 来 研究 , 而 (1.2) 说 明 我 们 “ 依 极 
限 ” 得 出 一 个 指数 分 布 . 直观 上 看 , 似乎 从 以 实数 为 元 素 的 样本 空间 出 发 直接 引入 
指数 分 布 比较 自然 . 

例 (b) ”随机 选择 . 在 区 间 @90,I 中 “随机 地 选择 一 点 ” 是 一 个 有 明显 直观 意义 的 
理想 实验 . 它 可 用 离散 逼近 来 表述 , 但 比较 容易 的 是 用 整个 区 间作 为 样本 空间 ,并 
指定 每 个 子 区 间 的 长 度 为 其 概率 . 作 两 次 独立 的 随机 选择 I 中 点 的 理想 实验 , 得 
到 一 对 实数 . 因此 ， 自 然 的 样本 空间 是 一 个 单位 正方 形 . 在 这 种 样本 空间 中 ,自然 
把 “概率 "和 “面积 ”同等 看 待 . 这 样 做 对 于 某 些 基本 目的 是 十 分 令 人 满意 的 , 但 是 
往 后 进一步 就 会 产生 “ “面积 ”究竟 意味 着 什么 ” 这 种 疑问 . 

”外 更 多 的 例子 到 自 ， 第 1 卷 3.4 节 中 的 反正 弦 分 布 ; 3.7 节 中 的 返回 原点 次 数 和 初 过 时 间 的 分 布 ; 第 14 

章 中 的 随机 洲 动 的 极限 定理 ; 11.7 节 习题 20 中 的 均匀 分 布 


@ 关于 术语 “时 刻 " 的 使 用 , 参看 本 书 的 “符号 与 约定 " 表 . 
@ 区 间 是 带 有 横 线 的 ， 保留 符号 (a,5) 表示 平面 上 点 的 坐标 . 参考 本 书 的 “符号 与 约定 * 表 . 
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这 些 例子 表明 ， 连 续 样本 空间 在 概念 上 可 以 比 离散 模型 简单 ， 但 是 其 上 概率 
的 定义 却 依赖 于 积分 和 测度 论 这 类 的 工具 . 在 可 数 样本 空间 中 , 可 以 对 一 切 可 想象 
的 事件 赋 以 概率 , 但 在 一 般 空间 中 , 这 一 直觉 的 方式 会 导致 逻辑 上 的 矛盾 ,而 我 们 
的 直观 必须 适应 形式 逻辑 的 要 求 . 我 们 将 很 快 看 到 , 直觉 的 方法 即使 在 相当 简单 的 
问题 中 也 可 能 产生 困难 . 恰当 地 说 , 许多 有 概率 意义 的 问题 不 需要 明确 的 概率 定义 . 
有 时 它们 是 具有 分 析 特 征 的 问题 ， 而 概率 背景 主要 是 作为 对 我 们 的 直观 的 一 种 支 
撑 . 更 为 中 肯 的 是 , 某 些 具有 复杂 样本 空间 的 复杂 随机 过 程 可 导致 很 有 意思 而 且 容 
易 理 解 的 问题 . 这 些 问题 不 依赖 于 在 整个 过 程 的 分 析 中 所 用 的 巧妙 工具 . 典型 的 论 
述 如 下 : 如 果 过 程 可 以 被 完全 地 描述 出 来 , 则 随机 变量 2 应 当 具 有 如 此 这 般 的 性 
质 , 因此 其 分 布 应 当 满 足 如 此 这 般 的 积分 方程 . 虽然 概率 的 论证 能 极 大 影响 所 述 问 
题 中 方程 的 分 析 处 理 , 但 是 在 原则 上 后 者 与 概率 公理 无 关 . 各 领域 的 专家 们 常常 熟 
悉 这 类 问题 , 对 此 他 们 不 用 测度 论 , 因为 他 们 不 了 解 其 他 类 型 的 问题 和 不 严格 论证 
所 带 来 错误 结果 的 情况 . 

这 种 情况 在 本 章 (全 书 的 非 正 式 引 论 ) 中 变 得 更 明显 了 . 它 叙述 了 本 书 通 篇 将 
用 到 的 两 种 重要 分 布 的 某 些 分 析 性 质 . 本 章 也 包括 一 些 特殊 论题 , 部 分 是 由 于 它们 
的 重要 应 用 , 部 分 是 为 了 说 明 我 们 将 要 遇 到 的 新 问题 和 对 适当 工具 的 需求 . 但 不 必 
要 系统 地 或 按 其 出 现 顺序 去 研究 它们 . 

在 本 章 中 , 概率 由 初等 积分 定义 , 同时 承认 这 个 定义 的 局 限 性 . 概率 论 术语 如 
随机 变量 或 期 望 的 使 用 , 在 两 种 意义 下 可 认为 是 正当 的 . 其 一 , 与 第 1 卷 同等 情况 
相似 , 它们 可 以 解释 成 为 直观 的 技术 助手 ; 其 二 , 本 章 中 的 内 容 可 以 用 逻辑 上 无 缺 
陷 的 方式 由 1.2 节 例 (a) 所 述 的 离散 模型 通过 取 极 限 来 说 明 . 虽然 原则 上 了 既 不 必要 
又 不 值得 追求 , 但 后 一 方式 为 初学 者 提供 了 一 个 很 好 的 练习 机 会 . 


1.2 ”密度 和 卷 积 
直线 (或 R2) 上 的 概率 密度 是 满足 下 列 条 件 的 函数 f, 使 得 
十 co 
J(z) > of f(z)dr = 1. (2.1) 
目前 我 们 只 考虑 逐 段 连续 密度 (一 般 情 况 可 参看 5.3 节 ). 对 于 每 一 密度 f, 它 所 对 


@ 严格 和 直观 两 者 的 作用 容易 被 误解 如 第 1 卷 指出 ， 朴素 的 直观 和 朴素 的 思维 是 无 力 的 ,但 是 它 
们 随 着 数学 理论 的 发 展 而 增加 了 力量 . 今天 的 直观 和 应 用 依赖 于 昨天 的 最 难于 理解 的 理论 , 而 严格 
的 理论 加 强 了 思维 的 效率 . 的 确 , 经 验 表明 , 在 应 用 中 大 多 数 人 依靠 元 长 的 计算 而 不 是 简单 的 论证 ， 
因为 这 些 论证 看 来 是 危险 的 . (最 恰当 的 说 明 在 1.5 节 例 (a) 中 . ) 
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应 的 分 市 函数 9 下 为 。 
F(z)= 人 f(y)dy. (2.2) 


它 是 从 0 增加 到 1 的 单调 连续 函数 ， 我 们 说 和 F 和 集中 于 区 间 a < z < 5b 上， 
如 果 f 在 这 区 间 外 为 0. 密度 f 是 作为 直线 上 区 间 的 概率 的 赋值 而 被 研究 ， 区 间 
5= {a <z < 太 有 概率 


5 
F(b) — F(a) = / f(z)dz. (2.3) 


这 个 概率 有 时 用 P{a,6} 来 表示 . 在 这 种 赋值 下 , 单 点 的 概率 是 0, 闭 区 间 a < z < b 
和 a,5 有 相同 的 概率 . 

在 最 简单 的 情形 中 ， 以 实 直线 作为 “样本 空间 ”， 也 就 是 说 ， 以 数 来 表示 理想 
实验 的 结果 ，( 和 第 1 卷 一 样 ， 在 表示 实验 序列 的 样本 空间 的 建立 中 ,这 只 是 第 一 
步 .) 随机 变量 是 定义 在 样本 空间 上 的 函数 . 为 了 简单 起 见 ， 目 前 我 们 仅 把 这 样 的 函 
数 U 作为 随机 变量 ; 对 于 每 一 个 t, 它 使 事件 {UV 和 十 由 有 限 多 个 区 间 组 成 . 于 是 


Gl) = P{U< 寺 ， (2.4) 


正好 被 定义 为 了 在 这 些 区 间 上 的 积分 . (2.4) 定义 的 函数 G 称 为 7 的 分 布 函数 . 如 
果 G 是 函数 9 的 积分 , 则 9 称 为 分 布 G 的 密度 或 变量 U 的 密度 . 

显然 , 基本 随机 变量 是 坐标 变量 2X, 而 所 有 其 他 随机 变量 都 是 X 的 函数 . 多 
的 分 布 函数 重合 于 定义 概率 的 分 布 F. 不 用 说 , 任 一 随机 变量 Y = 9(X) 可 作为 一 
新 直线 上 的 坐标 变量 . 

上 述 这 些 术语 ,可 用 与 第 1 卷 情形 的 简单 类 比 来 说 明 其 正确 , 但 是 下 例 表明 ， 
我 们 的 模型 可 通过 离散 模型 到 极限 而 得 到 . 
例 (a) 数据 分 组 . 令 下 为 一 给 定 的 分 布 函数 . 选 一 固定 的 5 > 0， 并 考虑 离散 随 
机 变量 Xs; 对 于 (n 一 1)5 < z < n6,Xs 取 常 数值 n5. 其 中 n= 0, 士 ], 士 2…… 在 第 
1 卷 中 , 我 们 用 5 的 倍数 作为 样本 空间 , 并 以 下 式 来 描述 Xs 的 概率 分 布 : 


P{Xs =n6} = F(n6) - F((n ~ 1)6). (2.5) 


现在 Xs 变 成 扩大 的 样本 空间 中 的 随机 变量 , 它 的 分 布 函数 当 n5 < xz < (n+16 时 
等 于 F(n5). 在 连续 模型 中 ，Xs 作为 X 的 近似 , X 是 把 区 间 与 其 右 端 点 等 同 起 来 


@ 所 滑 “分布 函数 " 是 指 在 士 oo 处 具有 极限 0 和 1 的 右 连 续 非 减 函数 . 第 1 卷 主要 讨论 了 其 增长 是 纯 须 
跃 式 的 分 布 . 现在 我 们 把 注意 力 集中 在 分 布 函数 上 , 它 由 积分 来 定义 . 一 般 的 分 布 函数 将 在 第 5 章 研究 . 

@ 我 们 尽 可 能 用 大 写字 母 来 表示 随机 变量 ( 即 样本 空间 上 的 函数 ), 用 小 写字 母 表 示 数 或 位 置 参数 ， 符 
别 地, 这 对 于 坐标 变量 XX, 即 函数 X(z) = z 也 是 适合 的 . 
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而 得 到 的 (统计 学 家 知道 , 该 方法 是 作 数 据 分 组 用 的 ). 根据 第 1 卷 的 精神 , 我 们 把 
Xs 作为 基本 随机 变量 , 把 5 作为 自由 参数 来 处 理 . 令 5 一 0， 由 极限 定理 得 知 ,下 
是 Xs 的 极限 分 布 . 

例 (b) 对 于 z>0, 事件 {X2 < z} 和 事件 


{-Vi< xX < V5} 
相同 ， 随 机 变量 X? 有 一 个 集中 在 而 556 上 的 分 布 , 它 由 
F(VD) —F(-Va) 
给 出 . 微分 后 可 见 , X? 的 密度 g 为 


{VD +t-VDVE, > 0 
0, 当 z<0 时 . 
Xs 的 分 布 函数 对 所 有 = 由 F(35) 给 出 ， 它 的 密度 为 
51 
XX 的 期 望 (expection) 定义 为 
ed 
p00= /zfs, (2.6) 
但 是 要 求 积分 绝对 收敛 . 例 (a) 的 近似 离散 变量 Xs 的 期 望 与 它 的 积分 的 黎 间 (Rie- 
mann) 和 相同 ,因此 E(Xs) 一 E(X). 如 果 是 一 有 界 连续 函数 , 则 同样 的 论证 适 
用 于 随机 变 基 u(X), 关系 式 E(u(Xs)) 一 E(u(X)) 效仿 
ps 
Eu) = ula)f (oa; (2.7) 
微妙 之 处 在 于 这 个 公式 不 明显 地 利用 u(X) 的 分 布 , 于 是 ,只 要 知道 了 随机 变量 X 
的 分 布 就 完全 可 以 算出 它 的 函数 的 期 记 , 
和 的 二 阶 和 矩 (second moment) 定义 为 
+o0 
E(X?) = / z2f(z)dz, (2.8) 
只 要 积分 收 伍 . 令 一 了 ECX),X 的 方差 又 定义 为 


Var(X) = EX 一 站 ) = EC 一己 (2.9) 


1.2 密度 和 着 积 5 


注 “如 果 变 量 X 是 下 的 ( 即 密度 f 集中 在 厂 55), 上 (2.6) 式 中 积分 发 散 , 为 了 方便 
则 说 X 有 无 穷 期 望 ， 记 作 E(X) = oo. 同样 ， 当 (2.8) 式 中 积分 发 散 时 , 我们 说 X 
有 无 穷 方差 对 于 取 正 值 与 负 值 的 变量 , 在 积分 (2.6) 发 散 时 , 期望 没有 定义 . 一 个 
典型 的 例子 由 密度 x-1(1 + z2)-1 给 出 . 
密度 的 概念 可 以 转 用 于 高 维 空间 中 ,但 是 一 般 的 讨论 放 在 第 3 章 , 在 那 之 前 ， 
我 们 将 仅 考虑 第 1 卷 5.4 节 所 引入 的 乘积 概率 的 类 似 概念, 以 便 描述 独立 实验 的 组 
合 . 换 名 话说, 在 本 章 中 我 们 仅 讨论 形 如 f(z)g(y), f(z)g(y)h(z) 等 的 乘积 密度 ,此 
处 上 9,… 是 直线 上 的 密度 . 给 定 R2 平面 上 形 如 f(z)g(y) 的 密度 就 意味 着 “概率 * 
与 下 列 积分 等 同 ， 
P{4}= /rearay (2.10) 


“两 个 具有 密度 和 9 的 独立 随机 变量 X 和 了 ”的 说 法 ,意味 着 在 (X,Y) 平面 
上 由 (2.10) 给 出 概率 . 它 列 含 区 间 的 乘法 法 则 ,例如 P{X > a,Y > 5} = P{X > 
a}P{Y > 外}. 它 与 离散 的 情形 是 如 此 相似 , 以 致 不 需 作 进一步 说 明 . 

许多 新 的 随机 变量 可 定义 为 X 和 Y 的 函数 , 但 最 起 作用 的 还 是 和 3 = 六 ++Y. 
事件 4={S<s} 可 由 使 z+y < s 成 立 的 点 (z,y) 组 成 的 半 平 面 来 表示 . 以 G 表 
示 Y 的 分 布 函 数 , 因此 有 g(y) = G'(y). 为 了 得 出 苹 十 Y 的 分 布 函 数 ， 在 式 (2.10) 
中 , 在 y < s 一 z+ 上 积分 得 到 


P{X+Y <s}= fa — 2)f(z)dz. (2.11) 


由 于 对 称 性 , FF 与 G 所 处 地 位 可 以 交换 , 而 不 影响 其 结果 . 微分 可 见 ,， 大 十 也 的 密 
度 由 下 列 两 积分 中 任 一 个 给 出 : 


+o0 
广 fle—wotwav = {fas way. (2.12) 


上 式 定义 的 运算 是 5.4 节 所 导出 的 卷 积 的 特殊 情形 . 目前 我 们 仅 对 密度 利用 卷 
积 这 一 术语 : 两 个 密度 f 和 g 的 卷 积 是 一 个 由 (2.12) 所 定义 的 函数 ， 以 fj*g 表示 . 

整个 第 1 卷 处 理 的 是 离散 分 布 的 卷 积 , 且 法 则 是 相同 的 . 依 (2.12) 有 f*g = gxf. 
给 定 第 3 个 密度 h, 我 们 可 作出 (f* 9) *h, 这 是 3 个 分 别 具 有 密度 f,g,h 的 独立 
变量 之 和 X+Y+2 的 密度 . 随机 变量 求 和 的 可 交换 性 与 可 结合 性 , 蕴含 卷 积 的 同 
样 性 质 , 因此 f * g* 与 运算 顺序 无 关 . 

正 值 随机 变量 起 着 重要 作用 ,因此 指出 下 面 一 点 是 有 益 的 , 即 如 果 了 和 9 集 
中 在 本 50 上 , 则 式 (2.12) 的 卷 积 J*9 就 化 为 


fo9= 人 “f(s -Wely)ay = f ree = sae (213) 
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例 (c) 令 f 和 g 集 中 在 0,50 上, 且 定 义 flz) = ae 和 9(z) = Be-87, 则 
er-az _e-pz 
了 *g(z) 一 后 zr>0. + {2.14) 
当 a=B 时 , 规定 f*g(z) = a?ze-o*. (在 习题 12 中 继续 讨论 . ) > 
关于 随机 变量 概念 的 注 ”用 直线 或 笛 卡 儿 空间 了 ”作为 样本 空间 ,经 常会 使 随机 
变量 与 一 元 或 多 元 “普通 ”函数 间 的 区 别 模糊 起 来 . 在 第 1 卷 中 , 随机 变量 仅 取 
可 数 多 个 值 , 于 是 , 不 论 是 讲 定义 在 直线 上 的 函数 (如 二 次 函数 或 指数 函数 ), 还 是 
讲 定义 在 样本 空间 中 的 随机 变量 X? 或 ex , 其 含义 都 是 明显 的 . 甚至 这 些 函 数 的 表 
现 特征 也 是 完全 不 同 的 ， 因 为 “普通 ”指数 函数 的 值 域 是 正 实数 集 , 而 ex 的 值 域 
只 有 可 数 个 数 . 为 了 看 清 其 中 的 变化 , 现在 来 考虑 “两 个 具有 共同 密度 的 独立 随 
机 变量 X 和 Y”, 换 句 话说 , 平面 R? 作为 样本 空间 ,概率 定义 为 f(z)f(y) 的 积 
分 . 现在 每 一 个 二 元 函数 均 可 在 样本 空间 中 定义 , 因此 它 是 一 随机 变量 , 但 须 记 住 ， 
二 元 函数 也 可 以 与 我 们 的 样本 空间 无 关 地 定义 . 例如 , 某 些 统计 学 问题 迫使 人 们 引 
、 入 随机 变量 /(X)f(Y)[ 参 阅 6.12 节 例 (d)]. 另 一 方面 , 在 引入 样本 空间 R? 时 , 我 
们 显然 已 注意 到 与 样本 空间 无 关 的 “普通 ”函数 ， 由 该 “普通 ”函数 可 得 到 许多 随 
机 变 基 , 即 f(X), f(Y), f(X 士 Y) 等 等 . 因此 , 同一 个 了 既 可 作为 随机 变量 , 又 可 
作为 普通 函数 . 
通常 (和 在 每 一 特殊 情形 中 ) 我 们 是 否 涉及 随机 变量 是 容易 看 出 的 . 但 是 , 在 一 
般 理论 中 , 会 出 现 这 样 的 情况 ,其 中 一 些 函 数 (如 条 件 概 率 和 条 件 期 望 ) 既 能 看 作 
普通 函数 ,又 能 看 作 随机 变 基 , 而 且 , 如 果 对 选择 的 自由 没有 正确 的 理解 ， 则 就 会 
引起 混乱 . 
关于 术语 和 记号 的 注释 ”为 了 不 使 语句 过 长 ,习惯 上 也 可 以 称 E(X) 为 变量 闵 、 密度 了 或 
分 布 的 期 望 .其 他 术语 的 称呼 也 可 类 似 对 待 .例如 ， 卷 积 实 际 上 表示 一 种 运算 , 但 是 该 
术语 也 可 用 于 运算 的 结果 , 且 称 函数 f* 9 为 “ 卷 积 ”. 
在 早期 的 文献 中 ,分 布 和 频率 函数 等 术语 适用 于 我 们 称 为 密度 之 处 ,我 们 的 分 布 函数 
被 描述 为 “累积 ” 分 布 函数 ,而 且 简写 符号 c.d.f. 仍然 沿用 . 


1.3 指数 密度 
对 任意 固定 的 a > 0, 令 
flz) =ae ", F(z)=1-e "， 当 z>0 时 ; (3.1) 


且 当 z<0 时 F(z) = f(z) = 0. 于 是 f 为 一 指数 密度 , FF 是 其 分 布 函 数 . 简单 的 计 
算 表明 ,期望 等 于 a -1 ,方差 等 于 ac 2. 


1.3 指数 密度 ?了 


在 1.1 节 例 (a) 中 , 指数 分 布 作为 几何 分 布 的 极限 被 得 到 , 1.2 节 例 (a) 的 方法 
导致 相同 的 结果 . 回忆 在 随机 过 程 中 , 几何 分 布 经 常 支配 着 等 待 时 间或 寿命 , 而 且 
这 是 由 于 在 第 1 卷 13.9 节 所 说 的 它 “ 无 记忆 性 ”的 缘故 : 不 管 现在 的 年 龄 是 多 少 ， 
剩余 的 寿命 与 过 去 无 关 ， 且 其 分 布 和 整个 寿命 的 分 布 相同 . 现在 来 证 明 , 该 性 质 仅 
可 搬 到 指数 极限 分 布 而 不 能 搬 到 其 他 分 布 上 去 . 

令 了 表示 寿命 或 等 待 时 间 的 任 一 正 变量 . 用 尾部 


U(t) =P{T > (3.2) 


来 代替 了 的 分 布 函数 是 方便 的 . 直观 上 , U(t) 是 “寿命 超过 t 的 概率 ”. 已 知 年 龄 
为 s, 剩余 寿命 超过 t 的 事件 和 事件 {T > s+t} 相同 , 该 事件 (在 已 知 年 龄 为 s) 的 
条 件 概率 等 于 比值 V(s 十 t)/U(s). 这 是 剩余 寿命 的 分 布 , 为 使 它 与 整个 寿命 的 分 布 
相同 , 当 且 仅 当 
Uls+t)=U(s)U(), s,t>0 (3.3) 

在 第 1 卷 17.6 节 中 已 经 证 明 ， 该 方程 的 正 值 解 必定 具有 形式 U(t) = e-*t. 因此 ， 
如 果 寿 命 的 分 布 是 指数 分 布 ， 则 上 面 所 述 的 无 记忆 性 仍然 成 立 . 

我 们 将 把 这 种 无 记忆 性 称 为 指数 分 布 的 马尔 可 夫 (Markov) 性 . 用 分 析 的 说 法 
是 , 只 有 指数 分 布 F 的 尾部 UV = 1 一下 才 满 足 式 (3.3), 它 说 明 指 数 分 布 在 马尔 可 
夫 过 程 中 经 常 出 现 的 原因 . (马尔 可 夫 性 更 强 的 形式 将 在 1.6 节 统 述 .) 我 们 的 描述 
涉及 时 间 , 但 论证 是 一 般 的 , 当时 间 换 为 其 他 参数 时 , 马尔 可 夫 性 仍然 是 有 意义 的 . 
例 (a) ” 杭 张 强度 . 为 了 得 出 著名 的 有 限 链条 的 连续 模拟 , 链 的 强度 是 指 它 最 薄弱 
环节 的 强度 , 用 U(t) 表示 (由 某 种 材料 制 成 的 ) 长 度 为 t 的 线段 可 以 承受 某 一 固定 
负荷 这 一 事件 的 概率 . 为 使 长 为 s +t 的 线 不 突然 折断 ， 当 和 且 仅 当 线 的 两 段 分别 都 
能 承受 给 定 的 负荷. 假定 没有 相互 作用 , 这 两 个 事件 应 当 看 作 是 独立 的 , 因而 U(t) 
必须 满足 式 (3.3). 其 中 线 长 充当 了 时 间 参 数 的 角色 ， 线 折断 时 的 长 度 是 一 个 有 指 
数 分 布 的 随机 变量 . 
例 (b) 空间 中 的 随机 点 群 在 许多 方面 起 作用 , 因此 , 对 这 概念 给 以 适当 定义 是 重 
要 的 . 直观 上 讲 , 完全 随机 性 这 个 首要 的 性 质 就 是 在 不 同 区 域 中 没有 相互 作用 : 区 
域 4; 内 观察 到 的 情况 ， 不 能 给 出 与 其 不 相交 区 域 42 内 点 群 的 结论 . 特别 地 ，A1 
和 42 皆 空 的 概率 p 等 于 41 为 空 的 概率 pi 与 4 为 空 的 概率 pa 之 积 . 这 个 乘法 
法 则 对 于 所 有 区 域 的 划分 不 可 能 成 立 ， 除非 概率 p 仅 依赖 于 区 域 4 的 体积 而 不 依 
束 于 它 的 形状 . 如 果 情 况 确实 如 此 , 则 用 U(t) 表示 体积 为 上 的 区 域 不 含 点 的 概率 ， 
它 满足 式 (3.3)， 因 此 U(t) = et; 常数 a 依赖 于 点 群 的 密度 ,或 等 价 地 依赖 于 长 
度 的 单位 . 下 一 节 将 指出 U(t) 的 这 一 知识 能 使 我 们 算出 体积 为 t 的 区 域 恰 好 包含 
点 群 的 n 个 点 的 概率 ; 它 由 泊 松 (Poisson) 分 布 pn(t) = ex“*(at)" /nl 给 出 . 因此 ， 
我 们 称 之 为 泊 松 点 群 ,这 一 术语 比 有 其 他 内 容 的 随机 点 群 的 术语 更 确切 一 些 . 
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例 (c) ” 国 和 球 的 群体 . 质点 的 随机 群体 提出 一 个 更 复杂 的 问题 . 为 了 简单 起 见 ， 
假定 质点 是 球形 或 圆 形 的 , 半径 p 固定 . 于 是 它 的 组 成 完全 由 圆 ( 球 ) 心 所 决定 , 且 
假定 这 些 圆心 形成 泊 松 点 群 . 虽然 这 在 严格 意义 上 是 不 可 能 的 , 因为 圆心 的 相互 距 
离 必须 大 于 2p. 但 是 我 们 仍然 认为 , 对 于 小 的 半径 p, 有 限 尺寸 的 影响 在 实际 中 可 
以 忽略 , 因此 圆心 的 泊 松 点 群 模型 作为 近似 是 可 行 的 

作为 数学 模型 ， 我 们 假定 圆心 形成 泊 松 点 群 ， 并 默认 圆 或 球 相交 的 可 能 性 . 如 

果 半 径 p 是 小 的 ， 则 这 一 理想 化 将 无 实际 效果 ， 因 为 此 时 相交 的 理论 频率 可 以 忽 
略 . 因此 ， 天 文学 家 把 星球 系统 当 作 泊 松 点 群 来 处 理 , 这 个 近似 在 实际 中 看 来 是 极 
好 的 , 下 述 两 例 表明 在 实际 中 如 何 利用 此 模型 . 
例 (d) 有 最近 的 邻 域 . 我 们 研究 具有 密度 a 的 球 ( 星 ) 的 泊 松 点 群 . 体积 为 + 的 区 域 
内 不 会 图 心 的 概率 等 于 e-*. “原点 到 其 最 近邻 域 的 距离 大 于 ”等 价 于 “半径 为 
7 的 球 的 内 部 不 含 星球 中 心 ”. 这 样 的 球 的 体积 等 于 3rr?, 因此 在 星球 的 泊 松 点 群 
中 ,最 近邻 域 的 距离 大 于 r 的 概率 为 e- grer”. 这 一 表达 式 与 星球 半径 p 无 关 的 事 
实 , 表明 模型 的 近似 特征 和 它 的 局 限 性 . 

在 平面 上 , 球 换 为 图， 最 近邻 域 的 距离 的 分 布 函数 为 1 - een”. 

例 (e) ”继续 讨论 : 自由 路 程 . 为 了 叙述 方便 , 我 们 从 二 维 模型 开始 . 圆 盘 的 随机 
点 群 可 以 解释 为 稀 玖 森林 的 横 截面. 我 站 在 原点 ( 它 不 包含 在 任何 加 盘 中 ),， 看 着 正 
z 轴 方 向 , 与 任 一 圆 盘 不 相交 的 最 长 区 间 BE 表示 视野 (visibility) 或 z 方向 上 的 自 
由 路 程 . 它 是 一 个 随机 变量 , 我 们 以 工 表示 . 

用 4 表示 由 这 样 一 些 点 组 成 的 区 域 , 它 与 z 轴 上 区 间 BE 的 某 点 的 距离 小 于 
或 等 于 p. 4 的 边界 由 直线 y= 士 p 上 的 两 条 线段 0< z <t 和 两 个 分 别 以 原点 和 点 
(&,0) 为 圆心 p 为 半径 的 圆 组 成 . 因此 4 的 面积 等 于 2pt + rp2. 为 使 事件 {L > 机 
发 生 , 当 且 仅 当 没 有 一 个 圆 盘 的 中 心包 含 在 4 的 内 部 , 但 是 事先 已 经 知道 , 以 原点 
为 中 心 、p 为 半径 的 图 是 没有 的 . 其 余 的 区 域 的 面积 是 2pt,， 因 此 我 们 断定 ,视野 工 
的 分 布 是 指数 分 布 ; 


P{L >#} =e Yr. 


在 空间 中 ,可 用 同样 的 论证 ,并且 有 关 的 区 域 可 由 4 绕 = 轴 旋 转 而 成 . 矩形 
0 < z < ty| < p 换 成 体积 为 xp?t 的 圆柱 体 ， 我 们 断言 ， 在 球形 星 的 泊 松 点 
群 中 ， 任 何方 向 的 自由 路 程 L 有 指数 分 布 ; P{L > 甘 = erre+， 平均 自由 路 程 为 
E(L) = 1/(rap2). > 
下 面 这 个 定理 将 被 反复 应 用 . 
定理 ”如 果 Xi，…，Xn 是 具有 指数 分 布 (3.1) 的 相互 独立 随机 变量 ， 则 和 Xi 十 
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十 的 密度 gn 与 分 布 画 数 Gn 分 别 为 


gn(z) = oe™, zr>0, (3.4) 


G1 tt) zr>0. (3.5) 


证 “对 于 nn 二 1, 结论 化 为 定义 (3.1). 密度 gt 由 下 面 卷 积 定义， 
on 的 = mt 一 antoha G.6) 
假定 (3.4) 成 立 , 于 是 得 到 
out 人 一 ye” 人/ “adz = ae (3.7) 


因此 , 由 归纳 法 可 知 , (3.4) 对 所 有 的 n 成立. 由 微分 可 得 (3.5). > 

密度 gn 是 2.2 节 所 引入 的 工 密度 . 它们 表示 负 二 项 分 布 的 类 似 连续 分 布 ， 负 
二 项 分 布 在 第 1 卷 6.8 节 中 是 由 具有 相同 几何 分 布 的 n 个 变量 之 和 求 出 的 . (参看 
习题 6.) 


1.4 ”等 待 时 间 的 悖 论 , 泊 松 过 程 
以 X1,X2,… 表示 具有 共同 指数 分 布 (3.1) 的 相互 独立 随机 变量 , 令 50=0， 
n= K+ n= 1 (4.1) 


我 们 引进 一 个 新 的 随机 变量 族 N(t) : N(t) 是 使 Sk < t 的 指标 k > 1 的 个 数 . 事件 
{N(t) =n} 发 生 , 当 且 仅 当 Sn < ,同时 Sm+1 >t. 当 5,。 有 分 布 Gn 时 , 该 事件 的 
概率 等 于 Gn(t) Gn+1(t), 或 者 


P{NG =n} = et (4.2) 


用 语言 表示 , 随机 变量 N(t) 有 期 望 为 at 的 泊 松 分 布 . 

这 一 论证 看 来 好 像 是 泊 松 分 布 的 新 推导 , 但 是 实际 上 只 是 用 随机 变量 的 术语 
来 重新 叙述 第 1 卷 6.6 节 的 原来 推导 . 为 了 直观 起 见 ， 考 虑 偶然 发 生 的 事件 (如 字 
宣 线 大 量 出 现 或 电话 铃 响 )， 我 们 把 它 称 为 “到 达 ”, 假定 它 是 无 后 效 的 , 即 过 去 的 
历史 无 助 于 断定 将 来 . 如 我 们 已 经 看 到 的 那样 , 这 个 条 件 要 求 第 一 次 到 达 的 等 待 时 
间 XX 是 指数 分 布 . 但 是 在 每 一 次 到 达 后 的 过 程 又 按 全 过 程 的 概率 规律 重新 开始 ， 
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两 次 到 达 之 间 的 等 待 时 间 Xk 必须 独立 且 有 相同 分 布 . 和 Sn" 表示 第 n 次 到 达 的 时 
刻 , N(t) 是 在 区 间 BE 中 到 达 的 次 数 . 在 这 一 论证 中 , 与 泊 松 分 布 的 原 有 推导 不 同 
之 处 , 仅 在 于 利用 了 较 好 的 专门 术语 . 

(在 随机 过 程 的 术语 中 , 序列 {5n} 构成 了 一 个 具有 指数 间隔 时 间 Xk 的 更 新 过 
程 ， 其 一 般 概 念 请 参看 6.6 节 . ) 

甚至 这 种 简单 情形 也 会 出 现 明 显 的 矛盾 , 它 说 明 需要 一 种 完善 的 方法 , 下 面 我 
们 用 一 种 自然 的 方式 来 叙述 . 
例 等待 时 间 的 悖 论 . 公共 汽车 依 泊 松 过 程 而 到 达 , 依次 相继 而 来 的 汽车 间隔 的 期 
望 时 间 是 ar:!. 我 在 时 刻 t 到 达 . 问 我 等 待 下 一 辆 汽车 的 时 间 Wi 的 期 望 EB(Wi) 是 
多 少 ? (当然 , 我 到 达 的 时 刻 t 与 汽车 无 关 , 例如 正中 午 . ) 以 下 两 个 不 同 的 解答 都 
是 有 道理 的 . 

(a) 泊 松 过 程 的 无 记忆 性 ， 药 含 着 我 的 等 待 时 间 分 布 不 依赖 于 我 的 到 达 时 刻 . 
在 这 种 情形 下 , E(Wi) = E(Wo) = a 1. 

(b) 我 的 到 达 时 刻 是 “随机 地 出 现 ” 在 区 间 内 的 . 在 两 辆 接连 而 来 的 汽车 中 间 ， 
由 于 对 称 性 ， 我 的 期 望 等 待 时 间 是 两 辆 接连 而 来 的 汽车 间隔 期 望 时 间 的 一 半 ， 即 
E(W:) = 5 

两 个 论证 看 来 都 是 合理 的 ， 并 且 都 被 用 于 实际 中 . 然而 该 矛盾 将 如 何 解释 呢 ? 
最 容易 的 是 形式 主义 者 的 办 法 ， 他 们 拒绝 去 看 清 一 个 不 是 以 完满 的 方式 来 陈述 的 
问题 . 但 是 问题 并 不 能 因 忽视 而 被 解决 . 

现在 我 们 指出 这 两 个 论证 在 本 质 上 (如 果 不 是 形式 上 ) 是 正确 的 . 矛盾 在 于 意 
料 不 到 的 地 方 ,下 面 来 说 明 这 一 点 . 

我 们 讨论 间隔 时 间 Xi = 51, X2 = 52 一 51,…. 根据 假定 , X 有 相同 的 指数 分 
布 , 其 期 望 为 a-!. 选取 “ 任 一 ” 特殊 的 Xk 就 得 到 一 个 随机 变量 , 我 们 从 直观 上 会 
认为 它 的 期 望 为 a-!1, 只 要 这 种 选择 不 需要 用 到 样本 序列 X1,X2,… 的 知识 . 但 这 
是 不 正确 的 . 在 本 例 中 , 我 们 选择 一 个 元 素 Xk 使 得 


Sk-1 <t < Sk, 


其 中 t 是 固定 的 . 这 个 是 不 考虑 实际 过 程 而 作出 的 选择 , 但 是 这 样 选 出 的 Xk 有 二 
们 的 期 望 2a-1. 考虑 这 一 事实 , 本 例 的 论证 (b) 假设 有 期 望 等 待 时 间 o- :， 于 是 矛 
盾 消失 . 

这 个 悖 论 的 解决 引起 了 有 经 验 的 工作 者 们 的 震动 , 但 是 , 我 们 的 思考 方式 一 经 
适当 调整 ， 它 在 直观 上 就 变 成 明显 的 了 . 粗略 地 说 , 长 区 间 比 短 区 间 有 较 多 的 覆盖 
t 点 的 机 会 . 这 一 含糊 的 直觉 被 下 列 命题 所 证 明 . 


7 @ 关于 各 种 悖 论 参看 6.7 节 例 (a). 悖 论 也 产生 于 一 般 更 新 理论 中 ， 在 它们 被 完全 理解 之 前 , 它们 曾 
引起 严重 的 困难 和 政 盾 . 有 关 的 基本 理论 参看 11.4 节 . 
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命题 今 入 ,XX2，,… 相互 独立 , 有 相同 的 期 望 为 a-! 的 指数 分 布 . 令 > 0 是 任意 
国定 的 ， 则 满足 条 件 St-1 < t < Sk 的 变量 Xk 有 密度 
Rl 当 0<z gt 时 ， 
wlz) = { all + at)e-“z， 当 z >t 时 . 3 
关键 在 于 密度 (4.3) 不 是 Xk 的 共同 密度 . 它 的 明显 形式 是 不 重要 的 . (任意 等 待 
时 间 分 布 的 类 似 情况 包含 在 11.4 节 式 (4.16) 中 . ) 
证 邻 k 是 使 Sk:-1 <t< Sx 的 (依赖 于 随机 性 的 ) 下 标 , 令 Lt 等 于 Sk - Sk-1. 我 
们 证 明 L: 有 密度 (4.3). 首先 设 z < 为 使 事件 {L: < z} 发 生 , 当 且 仅 当 对 于 某 
一 组 数 n, y 同时 有 Sn =y 和 t 一 y < Xnt1 < z. 这 需要 


t—-T<y<t. 


对 所 有 可 能 的 n 和 求 和 ,得 到 
Ptii<o} = /otW) lee eay (44) 
n=19t-z 


但 是 , gi(y) +g2(y) +…= a 是 恒等式 , 因此 
P{L: < 2} =1—-e °° —are ™. (4.5) 


经 微分 , 对 于 z < t 我 们 得 到 (4.3). 对 于 z > t 除了 y 的 值 域 是 0 到 tt 这 一 点 之 
外 ,其余 可 用 类 似 的 论证 , 同时 我 们 应 当 把 事件 0 < t < S1 < z 的 概率 ee ~-e-o” 
加 到 (4.4) 的 右 端 . 证 毕 . p 
公式 (4.3) 在 z = 上 处 的 间断 是 由 于 作为 过 程 开始 时 刻 的 原点 的 特殊 作用 . 显 
然 ， 
im ut(z) = ore™®, (4.6) 
它 表 明 原 点 的 作用 消失 了 ， 因 而 对 于 “ 老 ”的 过 程 ，Lt 的 分 布 几 乎 与 t 无关. 我 们 
把 这 一 事实 用 L 的 “稳定 状态 ”密度 表示 , 它 由 (4.6) 右 端 给 出 . 


用 证 明 中 的 符号 , 本 例 中 所 考虑 的 等 待 时 间 Wi 是 随机 变量 We = 5 一 t. 论证 
还 证 明了 


oo pt 
P{Wi < z} = erot 一 e-a(z+h 十 二 / gn(y)le- ®t ere(z+t-)]dy 
n=1 


=1—e-o,. (4.7) 


因此 , 按照 论证 (a), We 和 XX 有 相同 的 指数 分 布 . (参看 习题 7.) 
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最 后 介绍 泊 松 过 程 . 泊 松 变量 NN(i) 作为 随机 变量 无 穷 序列 X1,X2,… 的 样本 
空间 上 的 函数 而 引入 . 这 一 方式 能 满意 地 适合 于 很 多 用 途 , 但 是 ,一 个 不 同 的 样本 
空间 是 更 为 自然 的 .“ 观 察 直 至 时 刻 t 来 到 的 呼叫 次 数 ” 的 理想 实验 ,对 于 每 一 正 
数 t 得 到 一 个 整数 , 因而 结果 是 一 个 路 度 为 1 的 阶梯 函数 . 相应 的 样本 空间 是 以 这 
些 阶梯 函数 作为 样本 点 的 空间 ; 它 是 一 个 函数 空间 一 一 所 有 可 能 “轨道 ”组 成 的 
空间 . 在 这 个 空间 中 ,，N(t) 定义 为 时 刻 上 处 的 纵 坐标 ，S 定义 为 第 n 次 跳跃 的 模 
坐标 , 等 等 . 现在 可 以 考虑 不 易 用 原先 的 变量 X， 表达 的 事件 . 一 个 有 实际 意义 的 
典型 例子 (参看 6.5 节 中 的 破产 问题 ) 是 对 于 某 一 tN(t) > a 十 比 的 事件 . 一 条 轨 
道 (正如 二 项 试验 中 二 1 的 一 个 无 穷 序 列 一 样 ) 代表 自然 的 而 不 可 避免 的 概率 研究 
对 象 . 我 们 一 旦 习惯 了 这 个 新 术语 , 轨道 空间 就 变 得 极为 直观 了 . 

遗憾 的 是 ,在 样本 轨道 空间 中 概率 的 引入 远 不 是 简单 的 事情 比较 起 来 , 一步 
步 地 从 离散 样本 空间 到 直线 、 平 面 等 , 甚至 到 随机 变量 的 无 穷 序列 , 在 概念 上 和 技 
术 上 都 不 困难 . 新 的 问题 是 和 函数 空间 有 关 而 产生 的 ， 在 此 我 们 告诉 读者 ， 在 本 书 
中 不 讨论 这 类 问题 . 我 们 将 满足 于 序列 样本 空间 (可 数 多 个 坐标 变量 ) 的 简单 论述 . 
一 般 地 提 到 随机 过 程 或 特殊 地 提 到 泊 松 过 程 都 是 很 随意 的 ， 它 仅仅 提供 直观 背景 
或 增加 我 们 问题 的 趣味 性 . 

泊 松 点 群 

如 第 1 卷 6.6 节 所 指出 , 泊 松 分 布 律 不 但 支配 了 “在 时 间 轴 上 随机 分 布 的 点 ”， 
而 且 还 支配 着 在 平面 上 或 空间 中 随机 分 布 的 点 群 (如 材料 中 的 裂纹 或 蛋糕 中 的 葡萄 
干 ), 只 要 把 t 解释 为 面积 或 体积 . 一 个 基本 假设 是 , 在 指定 的 区 域 中 有 上 个 点 的 概 
率 只 依赖 于 区 域 的 面积 或 体积 , 而 不 依赖 于 它 的 形状 , 并 且 在 不 相交 的 区 域 中 的 出 
现 是 独立 的 . 在 1.3 节 例 (b) 中 , 我 们 利用 同一 假设 证 明了 体积 为 t 的 区 域 中 不 含 
点 的 概率 是 et. 这 相当 于 第 一 个 事件 发 生 的 等 待 时 间 的 指数 分 布 . 现在 看 到 , 对 
于 事件 个 数 来 说 ， 泊 松 分 布 是 它 的 直接 推论 . 同一 论证 适用 于 空间 中 的 随机 点 群 ， 
于 是 我 们 有 如 下 事实 的 一 个 新 证 明 : 包含 在 给 定 区 域 中 的 点 群 的 点 数 是 一 个 泊 松 
变量 . 形式 上 的 简单 计算 可 得 到 随机 点 群 的 有 趣 结 果 , 但 是 关于 泊 松 过 程 的 论述 同 
样 适用 于 泊 松 点 群 ; 完整 的 概率 描述 是 复杂 的 , 而 且 超 出 本 书 的 范围 . 
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众所周知 , 排队 肯定 要 等 上 一 段 时 间 , 而 类 似 这 样 的 倒霉 事 是 我 们 经 常会 碰 到 
的 . 概率 论 能 为 解释 这 类 问题 作出 多 大 的 贡献 呢 ? 为 了 得 到 部 分 答案 , 考虑 三 个 对 
各 种 情况 是 典型 的 例子 . 它们 说 明了 随机 起 伏 的 不 可 预料 的 一 般 特点 . 
例 (a) ”记录 值 . 以 Xo 表示 我 在 某 一 随机 事件 上 的 等 待 时 间 (或 金钱 损失 ). 设 我 
的 朋友 们 也 在 经 历 同 类 的 事情 , 其 结果 用 Xa, X2,… 来 表示 . 为 了 消除 偏 倚 , 假定 
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Xo, X1,… 是 相互 独立 是 具有 共同 分 布 的 随机 变量 . 这 种 分 布 的 性 质 实际 上 无 关 紧 
要 , 但 是 , 因为 指数 分 布 可 作为 随机 性 模型 , 依 (3.1) 我 们 假定 X; 是 具有 指数 分 布 
的 . 为 了 叙述 简单 ,我们 把 序列 {X;} 当 作 无 穷 序列 来 处 理 . 

为 了 寻求 我 的 倒霉 事 的 度量 , 我 问 , 在 某 一 个 朋友 磁 到 倒霉 事 之 前 , 我 的 倒霉 
事 要 持续 多 久 (忽略 了 使 X: = Xo 的 零 概 率 事件 ) 此 外 ,在 形式 上 ， 引 入 等 待 时 
间 入 作为 使 Xn > Xo 的 第 一 个 下 标 n 的 值 . 事件 {N > n 一 1} 发 生 ， 当 上 且 仅 当 
nn 元 组 Xo,X1,…,Xn-1 的 最 大 项 出 现在 最 初 的 位 置 上 . 由 于 对 称 性 ,这 事件 的 概 
率 是 n-!. 事件 {N = n} 和 事件 {N > n 一 1} - {N > n} 是 相同 的 , 因此 ,对 于 
n=1,2,.…, 
1 1 


1 
PN en 


(5.1) 
这 个 结果 完全 证 实 了 我 确实 很 倒霉 : 随机 变量 N 有 无 穷 期 望 ! 对 于 解决 我 的 倒 
蕊 记录 而 言 ， 如 果 平均 要 做 1000 次 实验 , 这 已 经 是 足够 坏 了 , 更 何况 实际 等 待 时 
间 有 无 穷 期 望 . 
注意 ,论证 不 依赖 于 Xi 是 指数 分 布 这 一 条 件 . 由 此 推出 ,只 要 Xk 独立 是 有 
共同 的 连续 分 布 函数 FF, 则 第 一 个 记录 值 有 分 布 (5.1). 这 分 布 不 依赖 于 FF 的 事实 ， 
被 统计 学 家 用 来 检验 独立 性 . (参看 习题 8~ 习题 11) 
结果 (5.1) 的 严格 而 又 一 般 的 性 质 同 证 明 的 简便 联系 在 一 起 ， 容 易 引 起 人 们 
的 怀疑 . 实际 上 论证 是 无 缺点 的 (除了 叙述 的 简便 外 ). 但 是 ,那些 宁愿 信赖 烦琐 计 
算 的 人 ， 由 上 述 概率 直接 定义 ， 求 a"+le-e(zo+…+zn) 在 不 等 式 0 < zo < zn 和 
0< zi < zo(j = 1,…,n 一 1) 所 确定 的 区 域 上 的 (n+1) 重 积 分 , 能 够 容易 验证 (5.1) 
的 正确 性 . 
(5.1) 的 另 一 推导 是 对 条 件 概率 的 有 益 练习 ; 它 虽 然 难 一 些 ,但 是 可 得 出 另外 
的 结果 (习题 8). 给 定 Xo = zx, 以 后 各 次 实验 中 取 较 大 值 的 概率 是 p = e-“*, 我 们 
讨论 的 是 具有 概率 p 的 伯 努 利 试验 中 第 一 次 成 功 的 等 待 时 间 , 因此 , 在 Xo =z 条 
件 下 N = 的 条 件 概率 是 p(1 一 p)"1. 为 了 得 到 P{N =n}, 我 们 乘 以 事先 的 假设 
Xo =z 的 密度 ae- “=， 并 对 z 积分 . 代 换 1 -eo =t, 被 积 函 数 变 为 如 -1(1 一 二 ， 
它 的 积分 等 于 n-! 一 (n+1)-1, 这 与 (5.1) 一 致 . 
例 (b) ” 比 . 如 果 X 和 了 是 两 个 具有 相同 指数 分 布 的 独立 变量 , 则 比 Y/X 是 一 
个 新 的 随机 变量 . 它 的 分 布 函数 由 aze "e+ 在 0 < y < 如 ,0 < z < co 上 积分 得 
出 . 对 y 积分 得 到 
= 一 cz 一 atz 一 
Pe/x <H=/ ae (1—e °°”)dz= 


t 
于 (52) 


相应 的 密度 为 (1 + 人 -7. 值得 注意 的 是 ,变量 Y/X 有 无 穷 期 望 
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这 里 我 们 找到 了 令 人 不 快 事件 的 持续 性 的 一 个 新 证 明 . 实际 上 , 如 果 彼 得 的 等 ， 

待 时 间 比 保罗 长 3 倍 , 彼得 有 理由 感到 委 居 , 但 是 分 布 (5.2) 赋予 这 事件 的 概率 是 
1/4. 由 此 推出 , 平均 地 说 , 保罗 或 彼得 二 者 之 一 都 有 理由 感到 委屈 . 由 于 很 短 的 等 
待 时 间 容 易 被 忽略 . 所 以 在 实际 上 要 增加 观察 次 数 . 
例 (c) 并行 的 等 待 线 ， 我 开 着 车 到 达 汽 车 检查 站 (或 进入 隧道 的 入 口 、 汽 车 的 轮 
渡口 ,等 等 ) 有 两 条 等 待 线 可 供 选择 , 但 是 我 一 旦 选择 一 条 ,就 不 能 再 换 . 跑 在 我 
后 面 的 史密斯 出 现在 我 也 许 该 选择 的 地 方 , 我 一 直 注 意 他 是 在 我 前 面 还 是 后 面 . 队 
伍 大 部 分 时 间 停 着 ， 偶 尔 某 条 等 待 线 向 前 运动 一 个 车 身 . 为 了 使 纯 随机 性 的 影响 最 
大 , 假定 两 等 待 线 随机 独立 ; 此 外 , 两 个 接连 的 运动 之 间 的 时 间 间 隔 是 具有 相同 指 
数 分 布 的 独立 变量 . 在 这 些 情况 下 ,接连 运动 构成 一 个 贝 努 利 试验 ， 其 中 “成 功 ” 
表示 我 在 前 “失败 ”表示 史密斯 在 前 . 成 功 概率 是 1/2, 这 在 本 质 上 说 明 我 们 所 讨 
论 的 是 对 称 随机 游 动 , 它 的 奇妙 的 起 伏 性 质 获得 清楚 的 解释 (为 了 令 述 简单 , 不 顾 
仅 有 有 限 辆 汽车 这 一 现实 情况 ). 我 能 否 跑 到 史密斯 的 前 面 呢 ? 用 随机 游 动 的 说 法 ， 
问题 就 是 : 第 一 次 通过 +1 能 否 发 生 . 如 我 们 所 知 , 这 事件 的 概率 是 1, 但 其 期 望 等 
待 时 间 是 无 穷 . 这 种 等 待 给 了 我 对 不 快 事件 感到 饮 惜 的 充足 理由 , 并 且 由 于 史密斯 
用 同 法 讨论 而 更 加 令 人 不 愉快 . 


1.6 ”等待 时 间 与 顺序 统计 量 


有 序 的 n 元 实数 (z1,…,zn) 可 以 按照 数值 增加 的 顺序 重新 排列 , 得 到 一 个 新 
的 n 元 组 
(zz ;Zn)), 其 中 zx) < za) 和 和 xz 


适用 于 空间 R" 中 一 切 点 的 这 一 运算 , 导出 了 n 个 完全 确定 的 函数 ,以 X(),…，X(n) 
表示 . 如 果 概 率 定义 在 R" 中 , 则 这 些 函 数 就 成 为 随机 变量 . 我 们 说 (X01),…，X(n)) 
是 由 (X1,…, Xn) 按 数 值 的 增加 重新 排列 而 得 到 . 变量 X(x) 称 为 给 定 样本 X1,…， 
Xn 的 第 上 个 顺序 统计 二?. 特别 地 ，Xa) 和 X(n) 是 样本 极 值 ; 当 n= 2v +1 为 奇 
数 时 ,X(u+1) 是 样本 中 位 数 . 

我 们 把 这 个 概念 应 用 于 具有 相同 指数 密度 ae-%? 的 独立 随机 变量 X1,… ,XX 
的 特殊 情形 . 


@ 严格 地 说 ,术语 “样本 统计 量 " 是 “样本 变量 的 函数 ”的 同 义 语 ， 即 是 随机 变量 ， 从 语言 上 讲 , 它 
的 使 用 是 为 了 强调 原来 变量 (样本 ) 和 某 些 导出 变量 在 给 定 范围 内 所 起 的 不 同 作用 . 例如 “样本 平 
均 " (Xi 十 … 十 Xn)/n 可 称 为 统计 量 . 顺序 统计 量 经 常 出 现在 统计 学 文献 中 . 我 们 沿用 标准 术语 ， 
除了 极端 值 通常 称 为 极 “ 值 ” 这 一 例外 . 
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例 (a) 并 行 的 等 待 线 . 把 XI， …，,Xn 解释 为 有 ? 个 柜台 的 邮局 从 时 刻 0 开始 的 
nn 次 服务 时 间 的 长 度 . 顺序 统计 量 表 示 服务 结束 所 接连 发 生 的 时 刻 , 或 者 说 ,接连 
解除 服务 的 时 刻 (“ 输 出 过 程 * ). 特别 地 , X0) 是 首次 解除 服务 的 等 待 时 间 . 现在 如 
果 假 定 无 后 效 是 有 意义 的 , 则 等 待 时 间 XG) 应 具有 马尔 可 夫 性 , 即 X() 必须 是 指 
数 分 布 的 . 事实 上 , 事件 {X() > 甘 发 生 等 于 nn 个 事件 {Xk > 寺 同时 发 生 , 其 中 每 
个 事件 有 概率 et; 由 于 假定 了 独立 性 , 概率 相 乘 , 可 得 


P{X( >t} = er"et. (6.1) 


现在 我 们 可 以 再 深入 一 步 ， 研 究 在 时 刻 X(1) 的 情况 .缺乏 记忆 性 的 假定 看 
来 可 导出 初始 情况 的 再 现 ， 除非 现在 只 有 n 一 1 个 柜台 在 工作 ; 过 程 的 后 延 是 与 
X() 独 立 的 , 并 且 是 全 过 程 的 复制 品 (再 现 ). 特别 地 ,下 一 次 解除 服务 的 等 待 时 间 ， 
即 X(2) 一 X(), 将 有 分 布 


P{X(2) — X() >t} =e De, (6.2) 


它 与 (6.1) 相 类 似 . 这 一 论证 导致 下 面 关于 有 相同 指数 分 布 的 独立 变量 的 顺序 统计 
基 的 一 般 命题 . 

命题 了 n 个 变量 X(),X(2) 一 XGD，…n 一 Xn-D 是 独立 的 ， 而 且 X(k+1) 一 X() 
的 密度 为 (n 一 有 ae 一 有 et， 

在 验证 这 个 命题 之 前 ,我 们 先 从 形式 上 考虑 它 的 含义 . 当 n=2 时 , 差 X(2) 一 
Xu 是 在 两 个 等 待 时 间 中 较 短 者 结束 后 的 剩余 等 待 时 间 . 命题 断言 ， 这 个 剩余 等 
待 时 间 和 原来 的 等 待 时 间 有 相同 的 指数 分 布 ， 并 且 与 X(1) 独立 . 这 是 由 依赖 于 国 
定时 刻 t 所 表现 的 马尔 可 夫 性 ,到 依赖 于 随机 的 停止 时 间 Xo) 的 马尔 可 夫 性 的 推 
广 . 称 它 为 强 马尔 可 夫 性 . ( 若 讨论 的 仅 是 有 穷 多 个 变量 , 则 能 由 弱 马 尔 可 夫 性 导出 
强 马 尔 可 夫 性 , 但 是 在 较 复杂 的 随机 过 程 中 , 差别 是 主要 的 .) 

命题 的 证 明 可 作为 积分 练习 的 例子 . 为 了 术语 简单 ， 我 们 令 n = 3. 和 许多 情 
形 类 似 , 利用 对 称 性 论证 . 在 变量 Xi 中 没有 任何 两 个 变量 相等 的 概率 为 1. 因此 ， 
忽略 概率 为 零 的 事件 ， 依 照 数值 大 小 而 有 Xi1, X2, Xs 的 6 种 可 能 排列 ， 它 表示 6 
个 等 概率 的 互 斥 事件 . 因此 , 为 了 计算 顺序 统计 量 的 分 布 ,只 要 考虑 一 个 随机 事件 
X1 < X2 < Xs 即 可 . 于 是 


P{X() > t1,X(2) — XO) > ta, X03) — X02) > ta} 
= 6P{X1>t1,X2 — X1 > ta, Xs — X2 > ta}. (6.3) 


@ 这 一 命题 多 次 为 统计 估计 的 目的 而 被 发 现 ， 但 通常 的 证 明 是 用 计算 方法 而 不 是 用 马尔 可 夫 性 . 参看 
习题 13. 
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(在 纯 分 析 上 , 空间 R? 被 划分 为 由 X1 < < Xs 所 确定 的 区 域 的 6 个 部 分 , 每 一 
部 分 上 的 积分 值 相同 , 两 个 或 更 多 个 坐标 相等 的 那 种 边界 事件 有 零 概率 , 因而 忽略 
不 计 .) 为 了 估计 (6.3) 的 右 端 , 我 们 在 以 不 等 式 


ZI1 > 和， T2 一 Z1 > 如， 7Z3 一 72 > 妇 
确定 的 区 域 上 积分 aae-“(Ca+s?+*s). 通过 对 zs 的 简单 积分 得 到 
Ge-ots ? -aridzy Nn 一 2azadz 
人 


二 
=3e fe ae dzrl =e (6.4) 
于 是 3 个 变量 XX(1), 义 (2) 一 XX(1),X(s) 一 X(o) 的 联合 分 布 是 3 个 指数 分 布 的 乘积 , 命 
题 得 证 . 

特别 地 , 由 此 推出 , ELX4+D 一 Xe) =1/ 一 Da 对 = 0,1,…,v 一 1 求 和 ， 
得 到 


1 1 1 
EC = (G+ tt) (6.5) 


注意 , 该 期 望 的 计算 并 没有 用 到 X(,) 的 分 布 的 知识 , 这 里 我 们 另 有 一 个 好 的 例子 ， 
它 通过 表示 一 个 随机 变量 为 其 他 变量 之 和 而 导出 命题 . (参看 第 1 卷 9.3 节 .) 
例 (b) 强 马尔 可 夫 性 的 应 用 . 设 3 个 人 A,B 和 CC 在 时 刻 0 到 达 邮 局 , 发 现 两 个 
柜台 空闲 着 . 3 个 服务 时 间 是 具有 相同 指数 分 布 的 独立 随机 变量 X,Y,2. 4 和 B 的 
服务 是 立即 开始 的 , 但 是 C 的 服务 是 在 4 或 B 离 去 后 在 时 刻 X(1) 开始 . 我 们 指 
出 , 马尔 可 夫 性 将 得 出 各 种 问题 的 简单 答案 . 

(i) C 不 是 最 后 一 个 离开 邮局 的 概率 是 多 少 ? 答案 是 1/2, 因为 第 一 个 离开 时 刻 
Xu) 在 C 和 被 服务 的 另 一 人 之 间 建 立 了 对 称 性 . 

(i C 在 邮局 所 用 时 间 工 的 分 布 是 什么 ? 显然 , T = X() +2 是 二 独立 变量 之 
和 , 这 二 变量 的 分 布 是 具有 参数 2a 和 a 的 指数 分 布 . 二 指数 分 布 的 卷 积 由 (2.14) 
给 出 , 可 见 了 有 密度 u(t) = 2a(e-“ 一 e-?0t), 并且 E(T) = 3/(2a). 

(ii) 最 后 一 个 离开 时 刻 的 分 布 是 什么 ? 以 X(1), (2),XX(s) 表示 依次 离开 的 时 刻 . 
差 X(s) - XG) 是 变量 X(s) 一 X(2) 与 XX(2) 一 XQ) 之 和 . 在 上 例 中 已 看 到 , 这 些 变量 
是 独立 的 ， 有 参数 为 2c 和 a 的 指数 分 布 . 因此 , X(s) - X() 与 变量 7 有 相同 的 密 
度 w. 现在 Xo) 与 XG) - X0D 独立 , 有 密度 2ae-?20t. 故 由 (i 中 所 用 的 卷 积 公式 
得 XX(s) 有 密度 


hale™™: — e-20t — ate™?2°4], 


而 且 E(X(s)) = 2/a- 
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与 直接 计算 一 比较 , 这 一 方法 的 优越 性 就 很 明显 了 , 但 是 直接 计算 适用 于 任意 
的 服务 时 间 分 布 (习题 19). 
例 (c) ”顺序 统计 量 的 分 布 ， 作 为 最 后 一 个 练习 ， 我 们 导出 X(k) 的 分 布 ， 事 件 
{X 和 十 表示 , 在 nn 个 变量 XGO) 中 至 少 有 大 个 < 这 表示 在 n 次 独立 试验 中 至 
少 及 次 “成 功 ”, 因此 


3 ~ /nn — eat)ie-(n-N)at, 6 
P{Xw < 里 EO)e eet)e (6.6) 
微分 后 可 见 ，Xto 的 密度 为 
的 Da 一 eret)k-le-O-betae-ot. (6.7) 


这 个 结果 可 由 下 面 不 严格 的 论证 直接 得 到 . 我 们 要 求 (直至 当 h 一 0 时 依 极限 可 忽 
略 的 诸 项 ) 如 下 联合 事件 的 概率 : 变量 Xi 中 的 一 个 位 于 t 与 t+h 之 间 , 其 余 n 一 1 
个 变量 中 的 k 一 1 个 < 而 其 他 n 一 k 个 变量 > t+h. 将 选择 次 数 与 相应 概率 相 乘 
便 得 到 (6.7). 建议 初学 者 将 这 种 论证 写成 明确 的 形式 ,并 从 离散 的 模型 导出 (6.7). 
(在 习题 13 和 习题 17 中 继续 讨论 . ) > 


1.7 均匀 分 布 


随机 变量 X 在 区 间 a,5 内 是 均 习 分 市 的 ， 如 果 对 于 a < z < 5b, 其 密度 是 常 
数 = (b 一 oa)!, 而 在 此 区 间 外 是 0. 此 时 变量 (X - oa) - oa)-: 在 而 I 内 是 均匀 分 
布 的 , 通常 我 们 利用 ,I 作为 标准 区 间 . 由 于 它 的 图 像 外 形 ， 所 以 也 称 均匀 分 布 函 
数 的 密度 为 “ 乱 形 " 密度 . 

对 于 均匀 分 布 , 区 间 0,1 变 成 一 个 样本 空间 , 在 其 中 , 区 间 的 概率 和 它 的 长 度 
相等 . 对 应 于 在 0,1 内 均匀 分 布 的 2 个 独立 变量 X 和 YY 的 样本 空间 , 是 R2 中 的 
单位 正方 形 , 其 概率 定义 为 面积 . 同样 的 办 法 适用 于 3 元 和 n 元 的 情形 . 

均 色 分 布 的 随机 变量 常 称 为 “随机 选取 的 点 X”. “对 而 I 中 的 点 作 n 次 独立 
随机 选取 ”这 一 理想 实验 结果 , 要 求 用 n 维 超 正方 体 来 作 它 的 概率 描述 , 而 这 样 的 
实验 在 同一 区 间 中 得 到 n 个 点 XZ,…,Xn. 其 中 没有 任何 两 点 相等 的 概率 为 1, 因 
此 它们 把 而 I 划分 成 n+1 个 子 区 间 . 把 这 n 个 点 按 其 从 左 到 右 的 自然 顺序 重新 排 
列 , 得 到 n 个 新 的 随机 变量 , 表示 为 X(),…,X(n). 这 就 是 上 节 所 定义 的 顺序 统计 
重 . 现在 划分 的 子 区 间 是 0,X(1), 其 次 是 (1), 叉 (2), 等 等 . 

在 圆 ( 周 ) 上 随机 地 选取 点 的 概念 是 不 需 解释 的 . 为 了 把 圆 上 n 次 独立 选取 的 
结果 具体 化 ,我们 设想 圆 是 按 逆 时 针 定向 的 , 因此 区 间 有 左 端点 和 右 端 点 , 且 可 表 
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示 为 5%8 的 形式 . 两 点 X! 和 Xa 独立 地 选取 , 它 将 圆 随机 地 分 成 两 区 间 Xi,X2 和 
下 ,下 (我 们 不 再 考虑 零 概 率 事件 X1 = X2). 

例 (a) ”经 验 解释 . 轮 盘 财 的 轮 盘 可 作为 在 贺 上 实现 “随机 选取 ”的 一 般 可 以 想到 
的 工具 . 在 6 位 小 数 的 数值 计算 中 , 合 入 误差 通常 作为 在 长 度 为 10-s 的 区 间 上 的 
均匀 分 布 随机 变量 来 处 理 (对 于 因 合 弃 最 后 两 位 小 数 而 产生 的 误差 , 具有 100 个 可 
能 值 的 离散 模 型 是 较 合适 的 ， 虽然 在 实际 中 不 大 方便 ). 盲 且 到 达 公 共 汽 车 站 的 旅 
客 的 等 待 时 间 ， 可 看 作 是 在 接连 离开 (汽车 ) 之 间 的 均匀 分 布 ，1.8 节 所 讨论 的 随 
机 分 裂 的 应 用 具有 较 广泛 的 理论 趣味 .在 许多 数理 统计 学 问题 中 (如 非 参数 检验 ) 
均匀 分 布 以 间接 方式 被 应 用 , 给 定 任 一 具有 连续 分 布 P 的 随机 变量 X, 随机 变量 
F(X) 在 BiI 中 是 均匀 分 布 的 . (参看 1.12 节 .) 

例 (b) ”随机 划分 . 我 们 证 明 下 面 命题 : n 个 独立 且 随机 选取 的 点 XI1，…，Xn 把 
友 工 划分 成 n 十 1 个 区 间 ,， 它们 的 长 度 有 一 个 共同 的 分 布 : 


P{L>t}=(-t", 0<t<l. (7.1) 


这 一 结果 是 惊人 的 ， 因 为 直观 上 ， 我 们 预料 至 少 两 个 含 端点 的 区 间 具 有 不 同 的 分 
布 . 但 是 ， 研 究 长 度 为 1 的 (定向 ) 圆 的 等 价 情形 8， 所 有 m + 1 个 区 间 都 有 同一 
分 布 就 变 成 显然 的 了 . 这 里 ni 十 1 个 点 X1,…,Xnti 是 独立 地 选取 的 , 并 且 随 机 地 
把 圆 划分 成 n 十 1 个 区 间 ; 由 于 对 称 性 , 这 些 区 间 应 当 有 相同 的 分 布 , 现在 设想 在 
点 Xnt1 处 把 贺 切 开 , 则 得 到 一 个 区 间 ， 其 中 Xi,…, Xn 是 独立 且 随 机 地 选取 的 . 
nn 十 1 个 随机 划分 的 区 间 长 度 是 相同 的 ， 它 们 有 共同 的 分 布 . 这 一 分 布 由 (7.1) 给 
出 ,只 要 研究 最 左 端 区 间 0,X() 就 可 看 出 这 一 点 . 它 的 长 度 超过 t， 当 且 仅 当 n 个 
点 X1,…, Xn 在 五 工 中 , 而 这 一 事件 的 概率 是 (1 一 )". 
在 用 单位 正方 形 表示 的 样本 空间 上 考查 3 个 事件 , 来 验证 在 特殊 情形 n=2 时 
的 这 一 命题 ,是 一 个 很 好 的 练习 (在 习题 22~ 习题 26 中 继续 讨论 ). 
例 (c) ” 悖 论 (与 1.4 节 的 等 待 时 间 悖 论 有 关 ). 在 长 度 为 1 的 圆 上 独立 且 随 机 地 选 
取 两 点 X1 和 Xa， 则 二 区 间 天 ,天 和 ,XI 的 长 度 是 均匀 分 布 的 ， 但 是 包含 一 
个 任意 点 也 的 区 间 长 度 入 有 不 同 的 分 布 (具有 密度 27). 
特别 地 ， 二 区 间 中 的 每 一 个 有 期 望 长 度 1/2, 但 是 含 P 点 的 区 间 有 期 望 长 度 
2/3. PP 点 是 任意 固定 的 . 我 们 认为 , 含 己 的 区 间 的 选取 并 “不 增加 关于 其 性 质 的 知 
识 ”( 借 用 概率 论 的 哲学 家 的 语言 ). 虽然 ,朴素 的 直观 不 是 为 解释 覆盖 或 不 覆盖 一 
个 任意 点 之 间 的 显著 差别 而 准备 的 , 但 是 经 适当 的 考虑 之 后 , 这 差别 变 为 “直观 上 
。。@ 为 了 用 计算 方法 论证 ， 注意 事件 {Xtk+) 一 Xt) > 二 的 概率 等 于 党 值 和 数 1 在 nl 个 相应 区 域 
之 并 和 集 上 的 积分 ， 读 区 域 或 由 一 曲 不 等 式 zl < … < zk < zk 十 E< zh+l < … < zn 确定 , 或 
由 交换 下 标 而 得 的 一 申 类 似 不 等 式 确定 . 更 精细 的 计算 导出 更 强 的 结果 ， 包 含 在 3.3 节 例 (c) 中 
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显然 * 了 . 然而 在 实际 上 , 有 些 有 经 验 的 作者 仍然 在 此 被 迷惑 

为 了 证 明 , 设想 在 P 点 把 图 切 开 , 且 让 我 们 在 TI 上 独立 是 随机 地 选取 两 点 . 
用 和 前 面相 同 的 记号 , 事件 {和 < 如 发 生 , 当 且 仅 当 Xe 一 XG) > 1 一 二 由 (7.0) 
式 知 这 一 事件 的 概率 等 于 t2. 因此 , 如 所 断言 那样 , 变量 有 密度 2t. (建议 初学 者 
用 直接 计算 来 证 明 .) 
例 (d) ”顺序 统计 重 的 分 布 . 如 果 X1,…,X。 是 独立 的 且 在 TI 中 均匀 分 布 , 则 注 
足 不 等 式 0 < Xi < t < 1 的 变量 个 数 , 具有 “成 功 " 的 概率 为 + 的 二 项 分 布 . 为 使 
事件 {Xt < 如 发生, 当 且 仅 当 诸 变 量 中 至 少 有 上 个 < t, 因此 


a 本 
Pixw < -=P (0)ea -9 (72) 
这 给 出 了 第 人 个 顺序 统计 量 的 分 布 函数 由 微分 可 求 出 Xt 的 害 度 
"(7 Dl 一 bn (7.3) 


由 此 可 见 , 诸 Xi 中 , 有 一 个 在 t 和 +h 之 间 , 余下 的 中 ,有 k 一 1 个 小 于 t 而 n 一 k 
个 大 于 也 这 一 事件 的 概率 等 于 

"(2 er 一 上 一 门 "一 th. 
除 以 ,并 令 h 一 0, 便 得 (7.3) 式 . 
例 (e) 极限 定理 .为 了 看 出 n 很 大 时 X(1) 的 分 布 性 态 , 最 好 把 E(X(y) = (n+1)-! 
作为 新 度量 单位 . 对 于 分 布 函 数 的 尾部 , 当 n 一 co 时 , 得 到 


PfnXo > 村 = 人 5) et. (7.4) 


通常 此 式 可 表述 为 : X(1) 依 极限 是 期 望 为 n-! 的 指数 分 布 的 变量 . 类 似 地 有 


er oH 


— et+te-t, (7.5) 


在 上 式 右 端 看 到 (3.5) 的 工 分 布 G2 的 尾部 .同样 易 证 ， 对 于 每 一 固定 的 k， 当 
n 一 00 时 ，mX(b 的 分 布 越 于 工 分布 Gk( 参 看 习题 33). 

原来 ,Gk 是 上 个 独立 指数 分 布 的 变量 之 和 的 分 布 , 而 X(k) 则 是 例 (b) 所 考 
处 的 前 个 区 间 之 和 . 因此 , 从 极限 意义 上 来 说 , 我 们 划分 的 连续 区 间 长 度 的 性 态 ， 
似乎 与 相互 独立 指数 分 布 的 变量 一 样 . 
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[由 二 项 分 布 (7.2) 的 明显 关系 式 看 到 ， 当 和 上 两 者 都 大 时 , 中心 极限 定理 可 
用 来 得 到 Xen 的 分 的 通 近 . 参看 习题 34. ] 
例 (9 比 . 令 六 是 在 而 中 随机 选 出 的 , 以 表示 两 区 间 古 全 和 卫 工 中 较 短 才 
的 长 度 ,以 V = 1 - 表示 较 长 者 的 长 度 . 随机 变节 V 在 0 和 上 之 间 是 均匀 分 布 
的 , 因为 事件 {0 <t< 当 } 当 上 仅 当 X < 或 1 - X < + 时 才 发 生 ， 所 以 有 概率 


六 由 对 称 性 , V 在 ;和 1 之 间 也 是 均匀 分 布 的 ， 而且 B(V) = 了 ,BR(V) = 3 关于 
比 WU 我 们 可 说 些 什么 呢 ? 为 使 V/U 超过 1 且 在 1 和 上 > 1 之 间 , 当 且 仅 当 


对 于 上 > 1, 由 此 立即 得 出 | 


P{V/V <# = #7 (7.6) 

它 的 密度 是 2(t 十 1)-?. 可 见 ，V/D 有 无 穷 期 望 . 此 例 说 明 , 在 对 E(V)/E(U) = 3 

的 观测 中 , 只 能 得 到 很 少 的 信息 . > 
1.8 随机 分 裂 


本 节 的 问题 是 总 结 上 述 例子 的 讨论 , 之 所 以 把 它 从 上 节 中 分 出 来 , 部 分 原因 是 
它 在 物理 学 中 的 重要 性 , 部 分 原因 是 它 可 作为 一 般 马 尔 可 夫 链 的 典型 . 

在 形式 上 ， 所 讨论 的 是 形 如 Zn = X1X2… Xn 这 样 的 乘积 ， 其 中 X1,…, Xn 
是 0,1 中 均匀 分 布 的 相互 独立 随机 变 基 . 
有 关 应 用 的 例子 ”在 某 些 磁 擅 过 程 中 ,一 个 物质 质点 被 分 裂 成 两 部 分 , 它 的 质量 
m 也 一 分 为 二 . 各 种 不 同 的 分 裂 规律 适合 不 同 的 过 程 , 但 经 常 假定 , 每 一 个 后 代 质 
点 所 得 到 的 那 一 部 分 母体 质点 的 质 基 在 0,1 中 是 均匀 分 布 的 . 如 果 二 质点 之 一 被 随 
机 地 选 出 并 受到 新 的 碰撞 ， 则 (假定 没有 交互 作用 ， 从 而 碰撞 是 独立 的 ) 两 个 第 2 
代 质 点 的 质量 为 乘积 mX1X2, 等 等 . (参看 习题 21.) 作 简单 的 字句 改变 , 该 模型 也 
可 用 于 矿物 颗粒 或 小 石子 等 的 分 裂 上 . 代替 质量 , 我 们 也 可 以 考虑 磁 擅 时 的 能 量 损 
失 ; 如 果 讨 论 的 是 同一 质点 在 连续 碰撞 中 的 能 量变 化 ,那么 叙述 可 以 稍微 简单 些 . 
最 后 一 个 例子 ， 考 虑 通过 物质 时 光 的 强度 变化 . 1.10 节 例 (a) 表明 ， 当 光线 以 “ 随 
机 方向 ”通过 半径 为 R 的 球 时 , 光 在 球 中 传播 的 距离 在 0 到 2R 中 是 均匀 分 布 的 . 
在 均匀 吸收 的 情况 下 , 这 种 通过 导致 入 射 光 的 强度 按 某 一 因子 衰减 , 这 一 因子 在 区 
间 束 9 中 均匀 分 布 (其 中 a < 1 依赖 于 吸收 强度 ), 尺度 因子 的 单位 并 不 会 严重 影响 
我 们 的 模型 , 因此 光 的 n 次 独立 通过 将 导致 光 的 强度 具有 2r 形式 的 因子 . > 

为 了 求 出 Zn 的 分 布 , 可 采用 两 种 方法 
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(i) 简化 为 指数 分 布 . 因为 和 的 运算 一 般 优 于 积 的 运算 , 我们 取 对 数 , 令 Yi = 
一 In Xk, Yi 是 相互 独立 的 , 对 于 上 > 0， 


P{Y: >t} =P{Xk Se 一 ee (8.1) 
早 在 (3.5) 式 中 已 经 算出 n 个 独立 指数 分 布 的 变量 之 和 
Sn 一 歼 十 十 区 
的 分 布 函数 Gn, 而 且 Zn = ers" 的 分 布 函 数 为 1 一 Gn(int"!), 其 中 0<t<1. 这 
个 分 布 函数 的 密度 是 二 1gn(Int-') 或 


n—l 
万 ( = 二 ( 1) ，0<t<l. (8.2) 


我 们 的 问题 显然 已 经 解决 . 这 个 方法 显示 出 用 适当 变换 进行 推导 的 优越 性 , 但 
是 , 成 功 取决 于 我 们 的 问题 与 一 个 以 前 解决 了 的 问题 的 偶然 等 价 性 

(iD 递 推 方式 对 有 关 问 题 及 其 普遍 化 具有 优越 性 , 令 Fn(t) = P{Zn < 甘 ， 且 
0 <t<1. 由 定义 , i(t) = 二 设 后 -1 为 已 知 , 并 注意 Zn = Zn-1Xn 是 两 个 独立 
变 基 的 乘积 . 给 定 Xn = z, 事件 {Zn < t} 当 且 仅 当 Zn-1 < t/z 时 才 发 生 , 且 有 概 
率 所 -1(t/z). 对 所 有 可 能 的 求 和 , 则 当 0<t<1 时 有 


1 a 
F(t) = / Fn_i(t/z)dz = 六 Fi(t/z)dz +t. (8.3) 


这 个 公式 在 原则 上 能 使 我 们 依次 算出 FE, Fs,…. 但 实际 上 ,最 好 用 相应 的 密度 户 
来 进行 计算 . 由 假定 ， 户 是 存在 的 . 依 归纳 法 , 假设 fn-1 存在 ,并 注意 当 s > 1 
时 , 记 -1(s) =0, 对 (8.3) 式 求 微分 可 得 


1 
APO=/ fo 的 时 ,0<t<l. (8.4) 
简单 的 计算 表明 ，f 确实 由 (8.2) 给 出 . 
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本 节 的 结果 在 其 本 身 和 某 些 明显 的 应 用 上 都 有 相当 的 价值 ， 而 且 预 料 不 到 它 
们 会 与 某 些 表面 上 看 来 无 联系 的 问题 有 关 ,， 如 调和 分 析 中 的 显著 性 检验 [3.3 节 例 
(9]、 泊 松 过 程 [14.2 节 例 (a)] 和 随机 飞行 [1.10 节 例 (e)]. 因此 , 所 有 的 公式 及 其 变 
形 都 反复 地 被 各 种 不 同方 法 所 导出 就 不 奇怪 了 . 下 面 所 用 的 方法 由 于 简单 和 适用 于 
有 关 问 题 , 因而 是 著名 的 . 
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令 a > 0 是 固定 的 , 以 X1,X2,… 表示 在 a 中 均匀 分 布 的 相互 独立 随机 变量 . 
令 5n = Xi 十 … 十 Xn. 我 们 的 第 一 个 问题 是 求 Sn 的 分 布 Un 及 其 密度 wn = [7 

由 定义 , 对 于 0<z < aaa 人 zc) = o 1， 对 于 其 他 的 z, ui(z) = 0( 矩 形 密度 ). 随 
后 的 un 可 由 卷 积 公式 (2.13) 定义 , 这 里 (2.13) 记 作 


wilo) = le -Way= BUn(e) — Une — ol. (91) 
易 见 
za™?2, 0gsrsga, 
人 一 { (2a—z)a-?, a<r<2a. (92) 


当然 ,对 于 其 他 的 z,wz(z) = 0. uz 的 图 像 是 带 有 底 边 0,3a 的 等 腰 三 角形 , 因此 称 

uz 为 三 角形 密度 . 同样 ,us 集中 在 34 上 , 它 由 3 个 不 同 的 二 次 多 项 式 来 确定 ， 

这 些 多 项 式 分 别 定义 在 区 间 的 3 个 1/3 全 长 的 子 区 间 上 . 为 了 得 到 一 般 的 公式 , 我 

们 引入 下 面 的 

记号 实数 工 的 正 部 , 记 为 

z+ 
2 

以 下 , 记号 在 表示 (z+)", 即 当 z < 0 时 等 于 0, 而 当 > > 0 时 等 于 zn 的 函数 . 注 

意 , 当 z < 时, (z 一 o)+ 为 0; 当 z>a 时 , (z 一 a)+ 是 一 线性 函数 . 利用 这 一 记 

号 , 均匀 分 布 可 以 写成 下 式 ， 


和 (9.3) 


T(z) = (z+ — (2 一 o+)a-1L. (9.4) 


定理 1 令 5n 是 nh 个 在 0 a 中 均匀 分 布 的 独立 变量 之 和 . 令 Un(z) = P{Sn < 2}， 
以 un = U4 表 其 密度 , 则 对 于 n=1,2,… 和 zx>0， 


Un(z) = 高 2 的 )ec- va)?, (9.5) 


人 十 1 
unta(z) = di Dy 人 引 人 一 va) (9.6) 
ee 


(对 于 > <0 和 n= 0,， 这 些 公 式 亦 成 立 ， 只 要 定义 z9 在 负 半 轴 上 等 于 0, 在 正 半 
轴 上 等 于 1. ) 

注意 , 对 于 在 (k 一 1)a 和 ka 之 间 的 点 r, 求 和 中 仅 有 大 项 不 为 0. 在 实际 计算 
中 , 为 了 方便 , 不 管 总 和 的 极限 如 何 而 直接 令 v 从 一 oo 变 到 +oo. 这 是 可 能 的 , 因 
为 根据 规定 , (9.5) 中 的 二 项 式 系数 在 v < 0 和 > m 时 等 于 0( 参 看 第 1 卷 2.8 节 ). 
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证 当 n=1 时 , 断言 (9.5) 化 为 (9.4), 这 显然 成 立 . 现在 我 们 用 归纳 法 同时 证 明 
两 个 断言 . 设 (9.5) 对 某 一 n > 1 成 立 . 代入 (9.1) 得 出 , un+1 是 两 个 和 式 的 差 . 把 
第 二 个 和 式 中 的 求 和 指标 v 换 为 v 一 1, 得 到 E 


wn = a TY [0) + )) -0 


它 与 (9.6) 式 相同 . 把 nn 换 为 n+1, 并 积分 这 关系 式 就 得 到 (9.5), 证 毕 . > 

( 另 一 证 明 包含 在 第 1 卷 11.7 节 的 习题 20 中 , 是 利用 离散 模型 取 极 限 . ) 

令 a= 2b, 则 变量 Xi 一 b 在 对 称 区 间 -55 中 是 均匀 分 布 的 , 因此 ni 个 这 样 的 
变量 之 和 与 Sn 一 nb 有 相同 的 分 布 . 它 由 Un(z 二 nb) 给 出 , 因此 , 我 们 的 定理 可 以 
改写 成 如 下 等 价 的 形式 . 
定理 la nn 个 在 一 b,b 中 均匀 分 布 的 独立 变量 之 和 的 密度 是 


ul + nb) = copy 2 (0) 人 +-20D9 (9.7) 

我 们 转向 一 个 有 两 种 等 价 表述 的 定理 ， 它 在 许多 由 应 用 所 产生 的 特殊 问题 中 
是 有 用 的 . 由 于 意外 的 幸运 , 所 求 的 概率 可 以 简单 地 用 密度 un 来 表示 . 我 们 用 一 种 
有 广泛 应 用 的 方法 给 出 分 析 的 证 明 . 对 于 以 几何 论证 为 根据 的 证 明 , 参看 习题 23. 
定理 2 在 长 度 为 t 的 轩 上 , 有 寻 二 2 条 长 为 上 的 缴 ， 它 们 的 中 点 是 独立 随机 选取 
的 . 这 n 条 弧 徐 盖 整 个 加 的 概率 pn(t) 是 


pn() = 0"(n 一 Di (9.8) 


它 与 下 式 相 同 : 
wm 的 = 2 (G- 汪 一. (99) 


在 证 明之 前 , 为 了 以 后 的 应 用 , 我 们 先 在 形式 上 把 定理 改写 一 下 . 在 nn 个 中 点 
中 选 一 个 作为 原点 ， 并 将 圆周 切 开平 放 在 长 度 为 上 的 区 间 TiE 中 . 其 余 n 一 1 个 中 
点 在 页; 中 随机 地 分 布 ， 显 然 定理 2 同样 可 表示 成 
定理 3” 邻 区 间 0 被 独立 随机 选取 的 吨 一 1 个 分 点 XX1,X2，…，Xn_1 划分 成 兄 个 
子 区 间 . 这 些 子 区 间 的 长 度 没有 一 个 超过 a 的 概率 pn(t) 等 于 (9.9). 

注意 , 对 固定 的 t,pn(t) 是 a 的 函数 ， 它 表示 从 划分 GE 所 得 的 n 个 区 间 中 最 
大 长 度 的 分 布丁 数 . 有 关 问 题 可 参看 习题 22~ 习题 27. 
证 ”只 要 证 明定 理 3 即 可 . 我 们 来 证 明道 推 公式 


mw 的 = [ oa 一 本 (59)” 二 (9.10) 


24 第 1 章 指数 密度 与 均 习 密度 


它 的 正确 性 可 直接 由 pn 作为 (n 一 1) 重 积分 的 定义 而 推出 , 但 是 最 好 把 (9.10) 式 
作 如 下 概率 的 人 氢 述 . 在 X1,… ,Xn-! 中 最 小 者 应 当 小 于 a, 它 有 一 1 种 选择 . 给 
定 X; = z,， 则 Xi 在 最 左 端的 概率 等 于 [(t - z)/ 纺 ?其余 变量 在 也; 中 是 均匀 
分 布 的 , 它们 满足 定理 条 件 的 条 件 概率 是 pn-1(t 一 z). 对 所 有 的 可 能 值 求 和 , 即 得 
(9.10).9 

现在 以 (9.8) 定义 un, 则 (9.10) 化 为 


ml = mle sd, (911) 

这 正 是 用 来 定义 us 的 递 推 公式 (9.1). 因此 ， 只 要 对 n = 2 证 明定 理 即 可 . 但 是 很 

明显 , 当 0<t<a 时 , p2(t) = 1; 当 a<t<2a 时 , gp2(t) = (2 一)/t, 与 (9.8) 一 

致 . La 
1.10 随机 方向 


在 平面 R? 中 选 一 随机 方向 , 和 在 圆周 上 随机 选 一 点 相同 . 如 果 我 们 想 以 它 与 
Zz 轴 正 半 轴 所 夹 的 角 来 规定 方向 , 则 圆 可 表示 为 它 的 弧 长 9, 0 < 9 < 2r. 对 于 空间 
了 Rs 中 的 随机 方向 ， 以 单位 球面 作为 样本 空间 , 其 上 每 一 区 域 的 概率 等 于 它 的 面积 
除 以 4r. 在 Ra 中 选 一 随机 方向 等 价 于 在 该 单位 球 上 随机 选取 一 点 . 因为 它 包 括 一 
对 随机 变 基 (经 度 和 纬度 ), 所 以 照 理应 将 它 放 到 第 3 章 去 讨论 , 但 是 它 出 现在 这 里 
似乎 更 为 自然 . 
命题 (i) 以 工 表 示 R3 中 有 随机 方向 的 单位 向 量 在 国定 直线 (例如 > 轴 ) 上 投影 
的 长 度 ,， 则 一 在 DiI 中 是 均匀 分 布 的 , 且 E(L) 一 到 
命题 “(ii 今 [是 同一 向 量 在 一 固定 平面 (例如 zy 平面 ) 上 投影 的 长 度 ， 则 对 于 
0<t< 1 U 有 密度 t/VI 一 红 , 且 


E(U) = i 


重要 的 一 点 是 两 投影 有 不 同 的 分 布 . 第 一 个 投影 是 均匀 分 布 的 , 它 不 是 由 于 随 
机 性 引起 的 , 但 是 依赖 于 维 数 . 在 R? 中 , (i) 的 对 应 命题 包含 在 下 列 命题 中 . 
命题 (过 ) 令 工 是 R? 中 单位 随机 向 量 在 2 轴 上 投影 的 长 度 ， 则 工 有 密度 
2/(xVi 一 x7), 并且 E(L) = 2/x. 


@ 对 于 密度 的 条 件 概率 感到 困难 的 读者 , 可 把 假设 X; = z 换 为 假设 2 一 h < Xi < z, 后 者 有 正 概 率 ， 
且 在 hh 一 0 时 到 极限 . 
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证 (ii) 如 果 9 是 随机 方向 与 y 轴 的 夹 角 , 则 工 = |sinb|. 因此 , 对 0<z<1, 由 
对 称 性 得 到 
P{L < x} =P{0 < 9 < arcsinz} = Parcsinz. (10.1) 


于 是 断言 由 微分 而 得 出 . 

命题 i) 和 命题 (ii) 称 为 关于 两 平行 平面 (这 两 平面 到 球 心 的 距离 要 相等 ) 之 
间 的 球 带 面积 与 球 带 高 度 成 比例 的 基本 定理 . 对 于 0 < 上 < 1, 事件 代入 甘 以 
高 为 2t 的 球 带 |z1| < t 来 表示 , 而 {U < 甘 相应 于 高 度 为 2 一 2V1 一 下 的 球 带 
|zsl > V1 一共. 除 常数 因子 外 ， 它 决定 了 两 个 分 布 函数 , 这 两 个 常数 可 由 两 个 分 布 
函数 在 t= 1 处 等 于 1 的 条 件 来 确定 . > 
例 (a) ”通过 球体 . 令 也 是 一 个 半径 为 7 的 球 ，N 是 球 上 一 点 . 过 N 以 随机 方向 
作 一 直线 交 呈 于 点 P， 则 线段 NP 的 长 度 是 一 个 在 0 和 27 之 间 均 匀 分 布 的 随机 
变量 . 

为 看 出 这 一 点 , 考虑 球 轴 NS 和 三 角形 NPS, 该 三 角形 在 已 处 有 直角 , 而 且 
在 NN 处 有 角 6. 因此, NP 的 长 度 是 2reos 6. 但 cos 8 也 是 NP 上 的 单位 向 量 在 
直径 NS 上 投影 的 长 度 , 因此 cos 6 在 0,I 中 是 均匀 分 布 的 . 

在 物理 学 中 , 这 个 模型 被 用 来 描述 光线 射 过 “随机 分 布 的 球体 ". 把 光线 的 吸 
收 当 作 上 节 中 随机 分 裂 过 程 的 一 个 例子 (参看 习题 28). 
例 (b) ”显微镜 下 的 国 形 物体 . 我 们 通过 显微镜 观察 到 的 是 细胞 在 riz? 平面 上 的 
投影 ， 而 不 是 它们 的 实际 形状 . 在 某 些 生物 学 实验 中 ,细胞 是 透镜 状 的 ， 可 把 它 作 
为 圆 盘 处 理 , 只 有 圆 盘 的 水 平 直径 依 它 的 本 身长 度 来 投影 , 而 且 整 个 圆 盘 投影 为 一 
个 椭圆 , 椭圆 的 短 轴 是 最 陡 的 半径 的 投影 . 一 般 地 ,假定 圆 盘 方 位 是 随机 的 ， 这 表 
示 它 的 法 线 方向 是 随机 选取 的 . 这 时 ,单位 法 线 在 zs 轴 上 的 投影 在 本 I 中 是 均匀 
分 布 的 . 但 是 , 这 法 线 与 zs 轴 的 夹 角 等 于 最 陡 的 半径 与 rizs 平面 之 间 的 角 , 因而 
短 轴 与 长 轴 之 比 在 0,1 中 是 均 名 分布 的 . 有 时 , 对 实验 的 估计 会 以 下 面 的 错误 意见 
为 依据 , 即 最 陡 的 半径 与 ziza 平面 之 间 的 角 是 均匀 分 布 的 . 
例 (c) 为 什么 两 把 小 提琴 的 声响 两 倍 于 一 把 小 提琴 的 声响 ? (这 个 问题 是 重要 的 ， 
因为 响 度 与 振动 振幅 的 平方 成 比例 .) 到 来 的 波 可 用 随机 单位 向 量 来 表示 ， 两 个 小 
提琴 的 又 加 效应 相当 于 两 个 独立 随机 向 量 相 加 . 由 余弦 定理 ， 和 向 量 长 度 的 平方 是 
2+ 2cos 8. 这 里 6 是 两 个 随机 向 量 之 间 的 夹 角 , 因此 cos 8 在 1,T 上 是 均匀 分 
布 的 , 且 期 望 为 0. 因此 , 总 长 度 的 平方 的 期 望 确实 是 2. 

在 平面 上 , cos 8 不 是 均匀 分 布 的 , 但 由 于 对 称 性 , 它 的 期 望 还 是 0. 因此 , 这 
个 结果 对 任何 维 数 都 成 立 . 亦 可 参看 5.4 节 例 (e). > 

R3 中 的 随机 向 量 是 指 一 个 具有 随机 方向 的 向 量 ， 其 长 为 L, 工 是 与 其 方向 独 
立 的 随机 变量 . 随机 向 量 的 概率 性 质 完全 由 它 在 z 轴 上 的 投影 所 决定 , 利用 后 者 常 
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可 避免 在 三 维 空间 中 进行 分 析 . 为 此 , 重要 的 是 知道 长 度 工 的 分 布 函数 V 与 向 量 
在 z 轴 上 的 投影 长 度 Za 的 分 布 之 间 的 关系 . 现在 Lz = XL, 其 中 义 是 单位 向 
基 在 给 定 方向 上 的 投影 长 度 . 因此 , X 在 0,1 上 是 均匀 分 布 的 , 且 与 工 独立 . 给 定 
天 =z, 事件 {Ls 和 甘 发 生 , 当 且 仅 当 工 <t/z, 从 而 9 


1 
F(t) = 小 V(t/z)dz, t>0. (102) 
0 
相应 的 密度 ， 可 通过 微分 得 到 
1 oo 
10=/ "(3) 衬 = [ve 时 Qo3) 
微分 得 出 
vd) = tf"(t), t>0. (10.4) 


于 是 , 我 们 求 出 了 R3 中 随机 向 量 长 度 的 密度 与 其 在 固定 方向 上 的 投影 长 度 的 密 
度 之 间 的 分 析 关 系 .。 关系 式 (10.3) 被 用 在 v 已 知 时 求 f, (10.4) 被 用 在 了 已 知 
时 求 0. (这 两 个 公式 之 间 的 不 对 称 性 , 是 由 于 方向 与 投影 长 度 不 独立 这 一 事实 引起 
的 . ) 

例 (d) ”速度 的 麦克 斯 市 (Maxwel) 分 布 . 考虑 空间 中 的 一 随机 向 基 , 该 向 量 在 x 
轴 上 的 投影 有 期 望 为 0、 方差 为 1 的 正 态 密度 . 因为 长 度 取 正 值 ， 所 以 我 们 有 


f(t) =2n(t) = V3/r eI, t>0. (10.5) 
于 是 由 (10.4), 有 
v(t) = V2/7 te-3t, >0. (10.6) 


这 就 是 统计 力学 中 速度 的 麦克 斯 韦 密度 . 通常 的 推导 是 把 上 述 的 论证 和 对 f 具有 形 
式 (10.5) 的 证 明 结 合 起 来 . ( 另 一 推导 参看 3.4 节 . ) 

例 (e) 在 R3 中 瑞 利 (Lord Rayleigh) 的 随机 飞行 .研究 n 个 单位 向 量 , 其 方向 是 
独立 且 随机 选取 的 . 我 们 求 其 总 向 基 (或 向 量 和 ) 的 长 度 Ln 的 分 布 . 不 直接 研究 该 
总 向 量 , 而 考虑 它 在 > 轴 上 的 投影 . 该 投影 显然 是 n 个 在 二 1,I 中 均匀 分 布 的 独立 
随机 变量 之 和 . 和 的 密度 由 (9.7) 当 》 = 1 时 给 出 . 代入 (10.4), 立即 看 出 Ln 的 密度 
为 @ 


un(z) = pr Ey 人 (z+m 一 20)92，z>0. (10.7) 


@ 这 一 论证 重复 了 (8.3) 的 证 明 . 
@ 标准 参考 文献 是 钱 德 拉 泽 克 哈 尔 (S. Chandrasekhar) 的 论文 | 在 Wax(1954) 重印 |， 他 计算 了 v3， 
V4,v6 以 及 vn 的 储 里 叶 变换 . 因为 他 用 极 坐标 ,所 以 Wn(z) 应 当 乘 以 4rz3, 才 得 出 我 们 的 vn. 
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这 个 问题 产生 于 物理 学 和 化 学 中 (例如 , 向 量 表示 平面 波 或 分 子 链 ). 简化 为 一 
维 则 此 著名 问题 变 为 平凡 的 了 . 

同一 方法 适用 于 具有 任意 长 度 的 随机 向 量 , 于 是 (10.4) 能 使 我 们 把 R3 中 的 随 
机 游 动 问题 化 为 R! 中 较 简 单 的 问题 . 当 明显 的 解答 难以 得 到 时 ，, 中心 极 限定 理 提 
供 了 有 价值 的 信息 [参看 8.4 节 例 (b)]. > 


Rs 中 的 随机 向 重 以 类 似 的 方式 来 定义 . 向 量 长 度 的 分 布 Y 与 投影 长 度 的 分 布 FF 显然 
由 类 似 于 (10.2) 的 公式 联系 起 来 ， 即 


Fe) = / a (25) 4. (0.8) 


但 是 , 反 演 公 式 (10.4) 没有 简单 的 类 似 公式 , 为 了 用 下 表示 V， 需 要 依赖 于 相当 高 深 的 阿 
贝尔 (Abel) 积分 方程 理论 ?我 们 不 加 证 明 地 指出 , 如 果 FF 有 连续 密度 ， 则 
x/2 

1-va=z 人 了 (去 5) (10.9) 
(参看 习题 29 和 习题 30.) 
例 (f) 二 元 机 道 .在 观察 分 光 镜 的 二 元 轨道 时 ， 天 文学 家 只 能 测 出 向 量 在 与 视线 垂直 的 
平面 上 的 投影 .空间 椭圆 被 投影 为 这 个 平面 上 的 椭圆 ， 原 椭 贺 的 长 轴 位 于 由 视线 及 其 投影 
所 决定 的 平面 上 , 因此 可 以 合理 地 假定 , 长 轴 与 其 投影 之 间 的 夹 角 有 均匀 分 布 . (在 原则 上 ) 
由 测量 可 确定 投影 的 分 布 . 于 是 长 轴 的 分 布 由 阿 贝尔 (Abel) 积分 方程 的 解 (10.9) 给 出 。> 


1.11 ” 勒 贝 格 测度 的 应 用 


如 果 在 0,1 中 的 集 4 是 有 穷 多 个 长 度 为 和 ,和 2,… 的 不 重 伙 区 间 卫 , 12,… 的 
并 集 ， 则 均匀 分 布 给 出 它 的 概率 


P{A} = 和 A+M + (11.1) 


下 列 例 子 将 表明 , 某 些 简单 而 重要 的 问题 将 导致 无 穷 多 个 不 相交 区 间 的 并 集 . 定义 
(11.1) 仍 是 可 用 的 ， 并 把 P{4} 和 4 的 勒 贝 格 测度 等 同 起 来 ， 它 和 把 概率 与 密度 
f(z) = 1 的 积分 等 同 起 来 的 程序 相 一 致 ， 除 非 我 们 用 勒 贝 格 积分 ,而 不 用 黎 曼 积 
@ 阿 贝尔 积分 方程 的 变换 利用 了 变量 替换 
1 1 
F(z)=F (去 ) , Vi)=V (去 ) 和 wain?9 二 yy. 
于 是 (10.8) 取 形 式 


no=[ Wy) Lay. 


Vut —y) 
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分 (该 积分 不 一 定 存在 ). 在 勒 贝 格 理论 中 只 要 求 下 列 事实 : 如 果 4 是 可 能 相交 的 
区 间 卫 , 12,… 的 并 集 , 则 测度 P{4} 存在 , 而 且 不 超过 长 度 之 和 入 十 和 2 十 …. 对 
于 不 相交 区 间 , 等 式 (11.1) 成 立 . 勒 贝 格 测度 的 利用 符合 能 想像 得 到 的 直观 并 且 简 
化 了 问题 , 因此 许多 形式 上 取 极 限 是 正当 的 . 集 NN 称 为 零 集 , 如 果 它 包含 在 有 任意 
小 的 测度 的 集合 中 ， 即 对 于 每 一 。， 存 在 一 集 4 2 N, 使 P{4} < s. 在 这 种 情形 
下 , P{N} = 0. 

以 下 X 表示 在 0,1 中 均匀 分 布 的 随机 变量 . 


例 (a) X 为 有 理 数 的 概率 是 多 少 ?序列 1,1,2,1,3, 


31313' 414'5 “包含 I 中 所 有 有 理 
数 ( 按 分 母 的 增 大 排列 次 序 ). 选 = < 2 以 大 表示 中 心 在 序列 的 第 大 个 点 上 且 有 
长 度 a*+! 的 区 间 . 所 有 内 的 长 度 之 和 是 e 二 sa 十 …' < s, 它们 的 并 集散 盖 了 有 理 
数 . 因此 , 由 定义 可 知 有 理 数 集 的 概率 为 0, 而 X 以 概率 1 为 无 理 数 . 

试问 , 为 什么 在 概率 论 中 研究 这 种 集 ? 一 个 回答 是 , 排除 了 它们 就 什么 东西 也 
不 能 得 到 , 而 且 勒 贝 格 理论 的 应 用 实际 上 不 要 求 新 的 技术 就 把 问题 简化 了 . 第 二 个 
回答 对 初学 者 和 非 数 学 家 来 说 更 是 令 人 信服 的 . 下 述 各 种 问题 将 具有 确实 的 概率 本 
质 . 
例 (b) ”数字 7 以 多 大 概率 出 现在 X 的 十 进 制 小 数 展开 式 中 ? 在 0.7 和 0.8 之 间 
的 每 一 z 的 十 进 制 小 数 展开 式 中 , 数字 7 出 现在 第 一 位 . 对 每 一 n, 有 9"-! 个 长 度 
为 10-" 的 区 间 , 其 中 在 每 个 数 的 展开 式 中 , 7 出 现在 第 n 位 而 不 在 前 面 出 现 . (对 
于 n= 2, 它 的 两 端点 是 0.07 和 0.08, 其 次 是 0.17 和 0.18, 等 等 . ) 这 些 区 间 不 相 


2 
交 , 其 总 长 度 是 厂 (+ 光 +( 训 ) + = 工 因此 ,我 们 的 事件 的 概率 是 1 


注意 ， 某 些 数 有 两 种 展开 式 . 例如 , 0.7 = 0.6999… 因此 , 为 使 我 们 的 问题 明 
确 起 见 , 我 们 要 明确 规定 , 不 管 数字 7 在 展开 式 中 是 否 必 须 或 是 否 可 能 出 现 , 我 们 
的 讨论 都 与 此 无 关 . 理由 是 只 有 有 理 数 才 有 两 种 展开 式 , 而 且 有 理 数 集 有 和 零 概率 . 
例 (c) ” 搓 三 币 与 随机 选取 . 我 们 现在 来 看 一 看 如 何 用 离散 随机 变量 来 表述 “在 0 
和 1 之 间 随 机 选取 一 点 X”. 以 Xk(z) 表示 z 的 第 上 位 小 数 (为 了 明确 起 见 , 可 能 
时 我 们 采用 有 穷 展开 式 ). 随机 变量 Xx 取 值 0,1,…,9, 每 个 值 有 概率 元， 而 且 X% 
是 相互 独立 的 . 由 小 数 展开 式 的 定义 , 我 们 有 恒等式 


oo 
X= ,10 *X. (11.2) 
b=l 


这 个 公式 把 点 的 随机 选取 化 为 对 它 的 小 数 的 每 一 位 依次 选取 . 、 
为 了 进一步 的 讨论 ,我 们 把 十 进 制 小 数 变换 为 二 进 制 小 数 ， 即 把 基数 10 换 为 
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2. 代替 (11.2), 我 们 有 


本 
和 = D2 xX, (11.3) 
et 


其 中 Xk 是 相互 独立 的 随机 变量 , 它们 都 以 概率 3 取 值 0 或 1. 这 些 变 量 都 是 定义 
在 区 间 蔬 I 中 , 在 区 间 上 概率 与 勒 贝 格 测度 (长 度 ) 相等 . 这 一 表述 使 我 们 想起 第 1 
卷 的 掷 硬币 游戏 , 那里 样本 空间 是 由 正面 和 反面 即 0 和 1 的 无 穷 序列 组 成 . 在 此 样 
本 空间 中 , (11.3) 式 可 作 新 的 解释 . 在 其 中 ,Xk 是 坐标 变量 , 而 XX 是 由 它们 确定 的 
随机 变量 ; 它 的 分 布 函 数 当然 是 均匀 的 . 注意 , 第 2 种 表述 包含 两 个 不 同 的 样本 点 
0111111 和 1000000, 而 相应 的 二 进 制 展开 式 表示 同一 点 3. 但 是 ， 零 概率 的 概念 使 
我 们 能 把 两 个 样本 空间 等 同 起 来 ,用 更 直观 的 术语 来 说 , 忽略 了 零 概率 事件 , 在 0 
和 1 之 间 随 机 选取 一 点 页 可 以 由 搁 再 币 序列 来 实现 ; 反之 , 无 穷 多 次 掷 硬币 游戏 
的 结果 可 用 ,I 中 的 点 z 来 表示 . 掷 硬币 游戏 的 每 一 随机 变量 可 用 I 中 的 一 个 函 
数 来 表示 , 等 等 . 这 个 方便 和 直观 的 方法 在 概率 的 理论 开始 起 就 被 应 用 , 但 是 它 依 
赖 于 忽略 零 概率 事件 . 

例 (d) 。 康 托 尔 (Cantor) 型 分 布 . 一 种 具有 意 想不到 性 质 的 分 布 ， 在 下 面 的 研究 
中 被 发 现 : 在 (11.3) 中 考虑 偶数 项 的 值 或 等 价 地 考虑 随机 变 基 


oo 
Y=3D ,4xX, (11.4) 
v=1 


( 生 以 因子 3 是 为 了 简化 寺 论 ,奇数 项 的 值 与 3Y 有 相同 的 分 布 ). 分 布 函数 F(z) = 
P{Y < z} 将 作为 一 个 所 谓 奇异 分 布 的 例子 . 


在 计算 中 ,我 们 把 Y 作为 赌 徒 的 得 利 , 如 果 第 上 次 搓 均 匀 硬 币 出 现 反面 规定 
赌 徒 得 利 3 x 4 YY 多 于 0 和 3(4- +4-2 十 …) = 1 之 间 . 如 果 第 一 次 试验 结 
果 是 反面 ， 则 得 利 > 3; 在 相反 情形 , Y < 3(4 -+ 4 十 …) = ¥ 于 是 不 等 式 


3 <Y < 了 在 任何 情况 下 都 不 能 成 立 ， 从 而 在 这 个 长 度 为 3 的 区 间 内 ,F(z) = 于 
由 此 推出 不 能 有 大 于 的 跳 中 

其 次 , 由 添上 因子 了 可 看 出 ， 第 2, 3, .… 次 试验 又 构成 了 整个 序列 的 复制 品 . 
因此 ， 严 在 区 间 0,3 内 的 图 形 与 在 整个 区 间 内 的 图 形 的 差别 仅 在 于 一 个 相似 变换 


F(z) = 了 da)， 0<z< 天 (11.5) 
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由 此 推出 , 在 以 = = 计 为 中 心 的 长 度 为 ;的 整个 区 间 上 ， 
F(z)=+ 

由 对 称 性 , 在 以 了 为 中 心 的 长 度 为 的 整个 区 问 上 ， 
F(z) =°5 


现在 我 们 看 到 3 个 总 长 度 为 三 + = 3 的 区 间 ， 在 每 一 个 区 间 上 F 取 常 数值 ， 
即 了 或 3 因此 ，F 不 能 有 大 于 3 的 哎 跃 . 还 简 下 4 个 长 度 均 为 去 的 区 间 ， 
在 其 中 的 每 个 区 间 内 ，F 的 图 形 与 整个 图 形 的 差别 仅 是 一 个 相似 变换 ， 因 此 ， 这 


四 个 区 间 的 每 一 个 都 包含 一 个 有 自己 一 半 长 度 的 子 区 间 ，R 在 子 区间 上 取 常数 什 
( 即 分 别 为 二 3， 站 ). 用 类 似 的 方式 继续 下 去 ,在 第 n 步 , 我 们 将 得 到 总 长 度 为 


2-1: 二 2-2 十 2-3 十 … 十 2 一 1 一 2 的 1+2+22 十 … 十 2n-1 个 区 间 , 在 其 中 的 
每 个 区 间 上 下 取 常 数值 

于 是 下 是 从 F(0) = 0 校 如 下 方法 增加 到 天 (1) = 1 的 连续 函数 ,这 方法 要 求 取 
常数 值 的 区 间 的 长 度 相 加 直到 等 于 1. 粗略 地 说 , FF 的 增加 点 全 发 生 在 测度 为 0 的 
集 上 . 这 里 , 我 们 得 到 连续 分 布 函 数 已 ,而 没有 密度 f. 9 > 


1.12 经 验 分 布 


n 个 肯 al az2,……an 在 直线 上 的 “经 验 分 布 画 数 ”， I 是 一 个 在 a1,…,an 上 
具有 胱 所 = 的 阶 棉 函 数 换 句 话说 , nPh(z) 等 于 -00,z 上 的 点 ak 的 个 数 ， F 是 
一 分 布 函数 给 定 n 个 随机 变量 X1,…,X，, 它们 在 样本 空间 特殊 点 上 的 值 构成 一 
个 n 元 数组 , 其 经 验 分 布 函 数 称 为 经 验 样本 分 布 . 对 于 每 一 z, 经 验 样本 分 布 的 值 
Fn(z) 确定 一 个 新 的 随机 变量 , 而 且 (Xi1,*…, Xn) 的 经 验 分 布 表 示 依 赖 于 参数 z 的 
一 族 随机 变量 .( 用 专门 术语 来 说 ， 所 讨论 的 是 一 个 以 z 为 时 间 参 数 的 随机 过 程 . ) 
这 里 不 企图 展开 经 验 分 布 的 理论 , 但 其 概念 可 以 说 明 , 在 简单 应 用 中 可 以 出 现 复杂 
的 随机 变量 , 而 且 均 匀 分 布 将 以 新 的 形式 出 现 . 

令 入 ,… ,Xn 表示 具有 相同 连续 分 布 F 的 相互 独立 的 随机 变量 . 假设 任意 两 
变量 取 同 一 值 的 概率 为 0， 因 此 我 们 可 以 把 注意 力 限于 由 ” 个 不 同 值 组 成 的 样本 . 
对 固定 的 z, 满足 X < z 的 变量 Xi 的 个 数 是 具有 “成功 ” 概率 为 p = F(z) 的 二 


@ 由 此 需 特别 注意 , 这 里 所 说 的 连续 分 布 函数 与 有 密度 的 连续 分 布 有 本 质 区 别 , 为 此 , 后 者 有 时 称 为 连续 
型 分 布 . 一 一 译 者 注 
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项 分 布 , 从 而 随机 变量 Fn(z) 有 可 能 取 值 为 0, 1/n,…,1 的 二 项 分 布 . 因此 , 对 于 大 
的 n 和 固定 的 z, Fn(z) 可 能 近似 于 F(z), 而 中 心 极限 定理 告诉 我 们 更 多 关于 可 能 
偏差 的 情况 . 更 有 趣 的 是 , 作为 整体 看 Fn( 随 机 变化 ) 的 图 形 以 及 它 允 近 FF 的 程度 . 
这 一 逼近 程度 的 度量 是 极 大 偏差 ， 即 


Dn= sup |Fn(z)— F(z)|. (12.1) 
—o0<z<o0 


这 是 一 个 统计 学 家 们 很 感 兴趣 的 新 的 随机 变量 , 因为 它 有 下 列 性 质 : 随机 变量 Dn 
的 概率 分 布 与 已 无 关 (当然 , 假设 已 是 连续 的 ). 

为 了 证 明 这 一 点 ， 只 需 验证 当 FF 换 为 均匀 分 布 时 Drn 的 分 布 保持 不 变 . 我 们 
从 证 明 变量 Yi = F(CXk) 在 I 中 是 均匀 分 布 入 手 . 为 此 目的 , 我 们 将 t 限 于 区 间 
0,1 内 , 在 其 中 定义 v 为 FF 的 反 函 数 . 于 是 事件 {F(Xk) < t} 与 事件 {Xk < v(t)} 
相同 , 它 有 概率 F(v()) =t. 由 此 断言 , P{Yk < t= 

变量 ,…, Yh 是 相互 独立 的 , 我 们 以 Gn 表示 其 经 验 分 布 . 利用 刚才 的 结果 
亦 可 证 , 对 固定 的 t, 随机 变量 Gn(t) 与 F(v(t)) 等 同 . 因为 t= F(v(t)) 蕴含 在 样 
本 空间 R" 中 的 每 一 点 上 有 


sup|Gn(t) —t| = sup|Fn(v(t)) — F(v(t)| = Dn. 


命题 得 证 . 

Dn 的 分 布 与 原先 的 分 布 无关 的 事实 , 使 统计 学 家 能 给 出 适用 于 原先 分 布 
未 知 时 的 试验 设计 和 估计 的 方法 . 此 时 , 与 Ds 有 关 的 一 些 其 他 变量 有 较 大 的 实际 
应 用 . 

令 X1,…,Xn,X#,…，X## 是 2n 个 有 相同 连续 分 布 F 的 相互 独立 随机 变量 ， 
分 别 以 Fn 与 于 表示 (Xi1,…, Xn) 和 (X##,…，X#) 的 经 验 分 布 . 设 


Dnn = sup |Fn(7) — F# (2)|. (12.2) 


这 是 两 个 经 验 分 布 之 间 的 极 大 偏差 . 与 Dn 有 关 的 特性 不 依赖 于 分 布 下 . 因此 , 它 
适用 于 “假设 (Xi,…, Xn) 和 (X 关 ,…，X##) 是 来 自 同一 母体 的 随机 样本 ”的 统计 
检验 中 . 

Dr 的 分 布 的 计算 和 研究 是 一 个 麻烦 的 问题 , 但 是 格 涅 坚 科 (B. V. Gnedenko) 
和 科 罗 留 克 (V. S. Koroljuk) 在 1951 年 已 经 证 明 , 整个 问题 可 以 化 为 具有 已 知 解 的 
随机 游 动 问题 . 他 们 的 论证 因为 优美 而 很 令 人 喜欢 , 我 们 用 它 来 说 明 简单 组 合 方法 
的 威力 . 
定理 ”P{Dnn < 7r/n} 等 于 对 称 随机 游 动 中 下 列 事件 的 概率 : 它 从 原点 出 发 并 在 
原点 结 来 ,轨道 长 度 为 2n 且 在 结 来 前 不 到 达 点 士 r. 
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证 只 要 考虑 整数 7 即 可 . 按照 递增 的 顺序 排列 2n 个 变量 X1,…,X##, 并 依照 第 大 
个 位 置 出 现 Xj 或 X# 而 定 ex = 1 或 ek = 一 1. 整个 排列 包含 n 个 1 与 n 个 1, 并 


且 所 有 (2 ) 个 顺序 是 等 可 能 的 . 因此 ,所 有 2n 元 组 eu, …,ezn) 与 内 原 点 开始 又 


在 原点 结束 的 长 为 2n 的 所 有 轨道 成 一 一 对 应 . 现在 如 果 e1 +…+ej = 上, 那么 前 了 
个 位 置 包含 有 (十 月 /2 个 无 # 号 变量 和 (j 一 )/2 个 有 ## 号 变量 , 因此 存在 一 点 2， 
使 得 Fn(z) = G+ 有 /2 和 琵 (z) = (j 一 k)/2n. 但 是 ,此 时 |Fn(z) 一 F#(z)| = |k|/n， 
因此 Dn,n > |k|/n. 反 向 的 同一 论证 即 可 完成 证 明 . p 


上 述 概率 的 明显 表达 式 包 含 在 第 1 卷 14.9 节 (9.1) 中 , 事实 上 ， 
P{Dn,n < rT/n} = wr,n 
是 质点 从 原点 出 发 在 时 刻 2n 返回 原点 而 从 不 到 达 +r 的 概率 . 后 一 条 件 可 由 在 tr 处 设 一 
吸收 壁 而 实现 ， 从 而 wr,n 是 十 r 为 吸收 壁 时 在 时 刻 2n 返回 原点 的 概率 . [在 第 1 卷 14.9 节 
(9.1) 中 , 区 间 是 a, 而 不 是 二 7,7. 我 们 的 wrn 与 ur,an(7) 相同 . ] 

在 第 1 卷 第 14 章 中 已 经 证 明 , 极限 手续 可 由 随机 游 动 导致 扩散 过 程 ， 依 此 方法 不 难 
看 出 ViDnn 的 分 布 趋 于 极限 .实际 上 ， 这 一 极限 早 在 1939 年 就 被 斯 米尔 诺 夫 (N. V. 
Smirnov) 发 现 ， 而 VAD 的 类 似 极 限 在 1933 年 为 科 尔 莫 总 罗 夫 (A. Kolmogorov) 发 现 . 
他 们 的 计算 是 很 复杂 的 ， 而 且 不 能 说 明 与 扩散 过 程 的 联系 ， 这 在 格 涅 坚 科 - 科 罗 留 克 方 
法 中 是 特有 的 . 另 一 方面 ,他 们 在 随机 过 程 收敛 性 上 给 出 了 有 成 效 的 工作 (如 比 林 斯 利 (P. 
Biningsley)、 唐 斯 克 尔 (M. F. Donsker)、 普 罗 霍 洛 夫 (Yu. V. Prohorov)、 斯 科 罗 霍 德 (A. 
V. Skorokhod) ,等 等 ). 

可 以 指出 ， 斯 米尔 诺 夫 定 理 同样 适用 于 有 不 同样 本 大 小 m 和 n 的 经 验 分 布 的 误差 
Dm,n. 随机 游 动 的 方法 可 以 用 上 去 ,但 却 不 够 优美 和 简明 ( 格 涅 坚 科 (B. V. Gnedeko)、 勒 
瓦 切 瓦 (E. L. Rvateva)). 许多 不 同形 式 的 Dm," 已 被 统计 学 家 们 研究 (参看 习题 36). 


1.13 习 题 


在 所 有 的 习题 中 , 假定 给 定 的 变量 都 是 相互 独立 的 . 
1. 令 针 和 YY 集中 在 mco 上 的 密度 为 ce ““. 求 下 列 各 变量 的 密度 ， 


1 (i) 3+2X, 
(ii) X—Y, (iv) |X—Y|, 
(v) 关 和 Y? 中 较 小 者 ， (vi) 和 和 Ys3 中 较 大 者 . 


2. 求解 如 上 问题 ,但 设 X 和 Y 的 密度 在 HT 了 上 等 于 二 在 二 TI 外 等 于 0. 

3. 如 果 X 的 密度 为 ce “=(z > 0 且 a > 0), Y 的 密度 当 0 < z < h 时 等 于 h-!, 求 
关 +Y 与 X 一 Y 的 密度 . ， 

4 求 六 一 2aX +5 有 复数 根 的 概率 ,如 果 系数 。 和 是 随机 变量 ， 其 共同 密度 为， 
(i) 均匀 的 , 即 当 0 < z <h 时 为 h-!; 


Sm 


3 


2 


10. 


11. 
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人 指数 的 , 即 当 > 0 且 a > 0 时 为 ce-“=. 


.如果 变量 X,Y 和 2 有 相同 的 指数 分 布 , 求 区 +Y/X 和 X 十 Y/2 的 分 布 函数 ， 
.通过 对 第 1 卷 6.8 节 (8.1】“ 负 二 项 分 布 ” 卷 积 公式 直接 取 极 限 来 推导 指数 分 布 的 卷 积 


公式 (3.6). 
在 1.4 节 的 泊 松 过 程 中 , 以 Z 表示 时 刻 上 与 上 前 最 后 一 次 “到 达 " 时 刻 或 时 刻 0 之 间 
的 时 间 ( 即 上 前 最 后 一 个 间隔 时 间 ). 求 2 的 分 布 ， 并 证 明 当 t 一 co 时 其 趋 于 指数 分 
布 . 
在 1.5 节 例 (a) 中 证 明了 ,出 现在 第 n 个 位 置 上 的 第 一 次 记录 值 < z 的 概率 等 于 
rr Dt. 
试 确定 第 一 次 记录 值 的 概率 分 布 是 1 - (1 + az)e-"*. 
葛 一 般 地 , 如 果 X; 是 正 的 , 服从 任 一 连续 分 布 FF, 则 上 面 所 求 的 概率 等 于 [n(n 十 
了 FP"t1(z), 第 一 次 记录 值 的 分 布 是 FF 一 (1 一 FF)In(1 一 下)-1.] 
下 降 路 程 . 定义 随机 变量 N 为 使 不 等 式 Xi > X2 > … > XN-1 < Xn 成 立 的 唯一 下 
标 . 如 果 Xi 有 相同 连续 分 布 F, 试 证 P{N =n} = (n 一 1)/n!, 并 且 E(N) =e. 
提示 : 利用 关于 记录 值 的 1.5 节 例 (a) 的 方法 . 
运输 中 车 队 的 形成 .@ 汽车 接连 地 从 原点 出 发 ， 各 以 不 同 的 但 恒定 的 速度 沿 着 无 穷 长 
的 公路 行驶 ， 在 这 公路 上 不 能 超车 . 当 一 辆 汽车 赶 上 另 一 辆 较 慢 汽车 时 ， 就 被 迫 以 较 
慢 的 速度 跟随 前 进 ， 因 此 ， 便 形成 一 个 汽车 队 , 车 队 最 后 的 车 数 依赖 于 车 速 而 不 依赖 
于 相继 出 发 的 时 间 . 
把 汽车 速度 看 作 具 有 相同 连续 分 布 的 独立 随机 变量 . 随机 地 选 出 一 辆 汽车 ,并 且 设 下 
一 辆 汽车 正 要 出 发 . 用 1.5 节 例 (a) 的 组 合 方法 证 明 ， 
(a) 给 定 的 一 辆 汽车 不 跟随 任何 一 辆 汽车 的 概率 趋 于 主 
(b) 由 这 辆 汽车 产生 车 队 的 车 数 为 "( 确 实 有 n 一 1 辆 汽车 跟随 在 它 后 面 ) 的 概率 趋 于 
1/(n+ 1)(n +2). 
(0) 给 定 的 这 辆 汽车 是 车 数 为 n 的 车 队 中 最 后 一 辆 的 概率 趋 于 同一 极限 . 
记录 值 1.5 节 例 (a) 的 推广 .代替 对 单个 数值 Xo 的 预先 观察 , 我们 从 具有 顺序 统计 
量 (XG),…，X(m)) 的 样本 (X1,… ,Xm) 开始 . (共同 分 布 F 不 起 作用 ， 只 要 它 是 连续 
的 即 可 . ) 
(a) 如 果 NN 是 使 Xm+n > X(m) 的 第 一 个 指标 n, 证 明 P{N > n} = m/(m 十 n). [在 
1.5 节 例 (a) 中 , m = 1] 
(b) 如 果 N 是 使 Xn+n > X(m-r+1) 的 第 一 个 指标 mn, 证 明 


P{N >n}= 的 Je 


@ G. F. Newell, Operations Research, Vol 7(1959). pp. 589—598. 


Q@ 5. S. Wilks, J. Australian Math. Soc., Vol. 1(1959), pp. 106—112. 
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对 于 >> 2,E(N) < oo, 且 


P{N < mz} 一 1 一 一 oo. 


(1+2)"’” 


(c) 如 果 N 是 使 Xm+n 落 在 区 间 X01)X(m) 外 部 的 第 一 个 指标 , 则 
m(m—1) 
minm+in—1) 
(指数 分 布 的 卷 积 ). 对 于 了 = 0,…,n, 令 Xi 的 密度 为 Ne ss(z > 0), 其 路 关 和 x( 除 

j= 上 外 ). 令 


P{N>n}= ， 且 E(N) < oo. 


加 om = [Mo — Xe) 7 Mei 一 Xe)(Akti 一 Xe)…(An 一 Xe 
证 明 Xo 十 … 十 Xn 的 密度 由 下 式 给 出 ， 
Palt) = Noe Mn-ilbome + e+ nne so. (*) 
提示 : 利用 归纳 法 、 对 称 论证 和 (2.14). 不 需要 计算 . 
( 续 上 ). 如 果 号 具有 密度 je- 开 ， 则 和 式 卫 十 … 十 Yn 的 密度 为 
f(z) = "De 人 1)™, z>0. 


如 果 Xi 有 相同 密度 e-”, 试 利用 1.6 节 例 (b) 的 命题 , 断定 所 -1 是 样本 X1,.… ,Xn 
的 极 差 X(n) 一 Xe) 的 密度 . 

纯 生 过 程 . 在 第 1 卷 17.3 节 的 纯 生 过 程 中 , 体系 通过 一 列 状态 Eo 一 Bl 一 …, 在 Ek 
上 的 恕 留 时 间 为 Xk， 它 具有 密度 Nee-*”. 于 是 Sn = Xo 十 … 十 Xn 是 En 一 En+1 
的 转移 时 刻 . 以 Pa(t) 表示 在 时 刻 t 体系 处 于 状态 En 的 概率 . 证 明 


Pn(t) = —P{S, > t} —P{S»1 > 4t)}, 
因而 Ps 由 习题 12 的 公式 (*) 给 出 . 此 过 程 的 微分 方程 , 即 为 
Pilt) = —MPo(t), P(t) = —Mn Pa(t) + AiPni(t), n>21. 


由 (1) 式 导出 (a), 由 和 式 Sn 的 性 质 导出 (b). 

提示 : 归纳 地 利用 对 称 论 证 ， 只 要 考虑 e*! 的 因子 就 行 了 . 

在 关于 并 行 等 待 线 的 1.6 节 例 (a) 中 , 说 体系 处 于 状态 上， 如 果 有 大 台 计算 器 空闲 着 . 
证 明 上 例 的 纯 生 过 程 模型 对 于 和 = (n 一 此 a 也 适用 . 求证 


P(t) = 的 (1 一 ezt)ke-o-bet. 


由 此 导出 Xx) 的 分 布 . 
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23. 
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. 分 别 考虑 由 m 和 n > m 人 排 成 的 两 个 队伍 , 假定 服务 时 间 有 相同 的 指数 分 布 . 证 明 ， 


较 长 的 队伍 首先 服务 完毕 的 概率 ， 等 于 扔 均匀 硬币 游戏 中 在 出 现 m 次 反面 以 前 出 现 
nn 次 正面 的 概率 . 考虑 两 个 变量 (它们 分 别 有 由 (3.5) 给 出 的 工分 布 Gm 和 Gn) 之 比 
X/Y， 并 求 出 相同 的 概率 . 

统计 估计 的 例子 . 假定 电灯 泡 的 寿命 为 指数 分 布 , 但 是 期 望 a-! 未知 . 为 估计 a, 取 有 
nn 个 电灯 泡 组 成 的 一 个 样本 ,并 观察 前 > 个 电灯 泡 的 使 用 寿命 


XK1) < Xo) < … < Xe 


a-! 的 “最 佳 无 偏 估计 量 ” 是 这 样 一 个 线性 组 全 U = XiXG) 十 … 十 和 rX(r), 使 得 
E(U) = oa + , 且 Var(U) 尽 可 能 为 最 小 . 试 证 明 


1 E 
U=(XW + + XH) + Xn "7, 


且 Var(U) = lo 


提示 : 借助 于 独立 变量 X(x) - X(k-D 进行 计算 (参看 1.6 节 例 (b))、 

如 果 变 量 X1,…, Xn 在 I 中 是 均匀 分 布 的 ， 证 明 : 极 差 Xo) - X() 具有 密度 
n(n - Dz" ?(1 - z)， 且 期 望 为 (n 一 1)/(n + D， 所 有 nn 个 点 在 长 度 为 t 的 区 间 内 
的 概率 等 于 多 少 ? 


, 当 3 个 服务 时 间 在 ,I 中 均匀 分 布 时 , 解决 1.6 节 例 (b) 的 习题 . ( 注 : 习题 包括 元 长 


的 计算 , 但 是 这 可 提供 运算 技巧 方面 的 有 用 练习 ) 


, 在 圆 上 独立 且 随 机 地 选取 4 个 点 . 求 弦 Xi Xa 和 弦 XsXs 相交 的 概率 ，(a) 不 用 计算 


而 用 对 称 论证 ;(b) 由 积分 定义 

在 1.8 节 随机 分 裂 过 程 中 ,以 X11, X12, Xa1, X22 表示 第 二 代 4 块 碎片 的 质量 ,下 标 1 
指 较 小 的 碎片 ,下 标 2 指 较 大 的 碎片 . 求 这 些 变量 的 密度 和 期 望 

注 下 列 几 个 习题 包含 一 些 关 于 区 间 的 随机 划分 的 新 定理 [参看 1.7 节 例 (b)]. 设 变量 
X1,… Xn 是 独立 的 且 在 5F 中 是 均匀 分 布 的 . 它们 把 这 区 间 划 分 成 n 十 1 个 子 区 间 ， 
子 区 间 的 长 度 按照 原 有 顺序 以 Li,… ,Ln+1 来 表示 [用 顺序 统计 量 的 记号 , 我 人 有 


Li=Xw, La=X0)— XW) Lnti=t— Xn)] 


以 pn(t) 表示 所 有 n+1 个 区 间 长 度 都 大 于 h 的 概率 . 换 句 话说 , pn(t) = p{min Ls > 
有 , 它 是 诸 区 间 中 最 短 者 的 分 布 函 数 的 尾部 . ] 证 明 递 推 关系 式 


en 
mm 的 = 其/ am-aajdr O 


并 求 出 pn(t) =t"(t 一 (n+ DA)?. 
类 似 于 (*) 式 , 不 用 计算 , 证 明 , 对 于 任意 zl > 0,…,zn+1 > 0， 


P{Li > zl ,LTn+l > Znt1} =t"(t— 1 — Tnt1)4. (#*) 
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这 一 优美 的 结果 是 德 菲 内 蒂 (B. de Finetti?) 由 几何 学 的 研究 而 推出 的 . 它 包 含 许 
多 有 趣 的 特殊 情形 . 对 一 切 j, 当 z; = h 时 , 我 们 得 到 上 题 1.7 节 例 (b) 相当 于 z; 中 
确实 有 一 个 不 为 0 的 特殊 情形 . 对 于 n 十 1 个 事件 中 至 少 有 一 事件 出 现 的 情形 , 1.9 节 
的 覆盖 定理 3 可 由 (**) 和 第 1 卷 4.1 节 (1.5) 式 推出 ] 

以 gn(t) 表示 所 有 Xi 的 相互 距离 都 大 于 h 的 概率 ( 它 与 习题 22 的 不 同 之 处 在 于 , 对 
两 个 端 区 间 L! 和 Lnt1 不 加 限制 .) 求 类 似 于 (*) 的 关系 式 , 从 而 推导 gn (i). 


、( 续 上 ). 不 用 上 题 的 方法 , 证 明 pn(t) = tt"(t 一 2h)"gn(t 一 2h). 
.对 圆 来 叙述 类 似 于 习题 24 的 问题 , 并 证 明 ， 习题 23 提供 了 它 的 解答 . 


一 等 用 三 角形 , 由 = 方向 上 的 单位 向 量 和 任意 方向 上 的 一 向 量 所 组 成 . 
(在 R? 中 , (i) 在 Rs 中 求 第 三 边 长 度 的 分 布 . 


.以 0 为 中 心 的 单位 图 ( 球 ) 在 正 z 轴 上 有 北极 .一 射线 通过 北极 , 且 它 与 > 轴 的 夹 角 


在 -3m 3 上 是 均匀 分 布 的 . 求 图 ( 球 ) 内 部 弦 长 的 分 布 . 
注 在 R2 中 ,射线 有 任意 的 方向 ,所 讨论 的 习题 与 1.10 节 例 (a) 类 似 .在 R? 中 习题 
是 新 的 


. 一 随机 向 量 与 它 在 > 轴 上 投影 的 期 望 长 度 之 比 , 在 R? 中 等 于 2, 在 R? 中 等 于 /2. 


提示 : 利用 (10.2) 和 (10.8). 


.一 随机 向 量 的 长 度 在 5, 上 是 均匀 分 布 的 . 在 (i)R3 中 和 (i)R? 中 , 求 向 量 在 z 轴 上 


投影 长 度 的 密度 . 提示 : 利用 (10.4) 和 (10.9). 


. 求 R4 中 一 随机 选取 的 方向 在 = 轴 上 投影 的 分 布 函数 . 、 
. 在 R 中 , 求 一 随机 向 量 长 度 分 布 与 它 在 z 轴 上 投影 长 度 分 布 之 间 的 关系 . 它 类 似 于 


(10.2) 式 . 特别 用 单位 向 量 验证 习题 31. 


顺序 统计 重 的 极限 定理 . (a) 令 X1,… Xn 是 在 责 工 中 均匀 分 布 的 . 证 明 : 对 于 固定 的 
上当 n 一 oo 时 
P{x < £2} — Gs),z >0, 


其 中 Gx 是 分 布 (3.5) 从 看 1.7 节 例 (e)]. 
(b) 如 果 Xi 有 任 一 连续 分 布 函数 F, 则 对 于 P { Xeo < (三) }, 同一 极限 存在 , 其 
中 是 下 的 反 函 数 . (斯 米尔 诺 夫 .) 


样本 中 位 数 的 极限 定理 ，(Xi，…,Xa2n-1) 的 第 n 个 顺序 统计 量 Xen 称 为 样本 中 位 数 . 
如 果 X 独立 且 在 而 I 中 均匀 分 布 , 证 明 


P 人 fi 一 < wv} — R(t), 


其 中 外 表示 标准 正 态 分 布 . 


@ Giornale Istituto Italiano degli Attuari, vol. 27 (1964), pp. 151 一 173, 意大利 文 . 
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35. 续 上 . 令 X; 有 连续 密度 为 了 的 共同 分 布 F. 令 m 是 理论 中 位 数 , 即 FF(m) = 到 证 明 


P{xe < 村 = on (全 习 [ra Py. 


利用 上 题 , 由 此 得 


P 人 fx 一 到 — ME). 


t 
“J } 
36. 证 明 1.12 节 格 涅 坚 科 - 科 罗 留 克 定理 的 下 列 变形 : 


{enim -rte> 5} = (2,)/ ( 


其 中 7 = 1 2……n 人 与 原来 的 表述 相对 照 ， 左边 绝对 值 被 省 略 了 ， 从 而 在 有 关 的 随机 
游 动 中 , 只 有 r 处 为 一 吸收 壁 .) 

37. 由 均匀 分 布 变量 到 指数 分 布 变量 的 生成 .@ 令 Xi1,X2,… 独立 目 在 而 中 是 均匀 分 布 
的 . 随机 变量 N 定义 为 使 X1 > Xa > … Xn-1 < Xn 的 下 标 (参看 习题 9). 证 明 


5 
PX < oN=n)}= 


n 


由 此 得 出 P{X1 < z,N 是 偶数 } = 1 一 e-. 

定义 Y 如 下 : 一 个 “试验 ”是 满足 以 上 条 件 的 一 列 变量 X1,… ,Xn; 如 果 N 是 奇数 ， 
则 试验 “失败 ”. 我 们 反复 独立 地 做 试验 直到 取得 “成 功 ”. 令 Y 等 于 失败 次 数 加 上 成 
功 试验 中 的 第 一 个 变量 . 证 明 , P{Y < z} = 1 一 e=. 


@ J. von Neumann，National Burea of Standards, Appl. Math. Series, No. 12 (1951), pp. 
36—38. 
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本 章 的 主要 目的 , 是 令 述 后 面 各 章 中 经 常 出 现 的 密度 以 供 参考 引用 . 第 2 部 分 
叙述 的 随机 化 方法 有 着 广泛 的 应 用 . 其 范围 可 用 推导 某 些 与 贝 塞 尔 (Bessel) 函数 有 
关 的 分 布 来 说 明 , 这 些 贝 塞 尔 函 数 出 现在 各 种 应 用 中 . 它 表 明 这 个 简单 的 概率 方法 
可 代替 复杂 的 计算 和 困难 的 分 析 - 


2.1 符号 与 约定 


我 们 认为 , 密度 f 及 其 分 布 F 集 中 ?在 区 间 了 = a,5 上 , 如 果 对 于 了 外 的 一 切 
z,jf(z) = 0. 于 是 , 当 z < a 时, F(z) = 0; 当 z>b 时 , F(z) = 1. 两 个 分 布 尺 和 
G 或 其 密度 f 和 9 称 为 是 同类 型 的 , 如 果 它 们 满足 关系 式 


G(z) = F(az +b), g(x)= af(az +b), (ID 
其 中 a > 0. 我 们 常 把 5 称 为 中 心 (centering) 参数 , a 称 为 尺度 (scale) 参数 . 这 些 术 
语 通过 如 下 事实 是 容易 理解 的 : 当 FF 作为 随机 变量 X 的 分 布 函数 时 , 则 G 是 
_X-b 
a a 
的 分 布 函 数 . 在 许多 场合 ,只 有 分 布 的 类 型 才 真 正 显得 重要 . 
f( 或 下) 的 期 望 m 与 方差 0? 定义 为 


处 


(1.2) 


全 二 广 zf(z)dr, o2 = ks (2 —m)?f(z)dz = 六 z2j(zjdz-m2， (1.3) 


如 果 这 些 积分 绝对 收敛 的 话 . 此 时 由 (1.2) 式 显然 可 见 , g 有 期 望 (m -1a 与 方差 
a2/a2. 由 此 推 知 ,对 于 每 一 类 理 的 分 布 ,至 多 存在 一 个 期 望 为 0 且 方 差 为 1 的 密 
度 . 
回想 1.2 节 (2.12) 式 ,两 个 密度 户 和 户 的 郑 积 了 = 户 * 户 是 一 概率 密度 , 定 
义 为 
1@= Alef. 0.4) 


@ 按照 通常 的 用 法 ,区间 了 的 闭 包 称 为 了 的 支 集 (support). 引进 新 术语 是 为 了 在 更 一 般 的 意义 上 利 
用 它 ; 例如 , 分 布 可 以 集中 在 整数 集 或 有 理 数 集 上 . 
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当 有 和 廊 集 中 在 而 56 上 时 ,这 个 公式 化 为 
J 四 = fe-Witay, 2>0. (8) 


上 式 表 示 两 个 具有 密度 和 户 的 独立 随机 变量 之 和 的 分 布 密度 . 注意 ， 对 于 
gi(z) = fi(z 十 bi)， 卷 积 g = g1*g2 由 g(z) = f(z 十 b+ 如 ) 给 出 ,这 由 (1.2) 
式 显然 得 知 . 

最 后 ,我 们 想起 标准 正 态 分 布 函 数 及 其 密度 , 它们 由 下 式 定义 : 


n= 大 了 -4 ay,n(z) = 雇 " (1.6) 


我 们 早 就 知道 , 具有 期 望 m 与 方差 0? 的 正 态 密度 由 下 式 给 出 ， 


$3 o>0 


在 中 心 极 限定 理 中 隐 含 着 一 个 基本 事实 ; 正 态 密度 族 关 于 卷 积 是 封闭 的 ; 换 句 话说 ， 
两 个 具有 期 望 m1, mz 与 方差 of,o3 的 正 态 密度 的 卷 积 是 一 个 具有 期 望 ml 十 ma 与 
方差 0? = of + o3 的 正 态 密度 . 鉴于 上 述 事实 ,只 须 对 于 ma = m2 = 0 来 证 明 它 即 
可 . 它 断 言 
1 人 [Cai i 妈 
ep[- 2o2 ”2roioz /=o[- 207 a] (17) 


利用 变节 替换 z = y(o/o102) 一 z(o2/c01), 这 个 断言 的 正确 性 就 显然 了 , 其 中 z 是 
固定 的 .( 见 习题 1.) 


2.2 TT 分 布 
人 铝 玛 函数 工 定义 为 
T(t) = [/ ed t>0. (2.1) 
0 


[ 见 第 1 卷 2.12 节 (12.22).] 它 依 下 式 引 入 阶乘 : 
T(n+1)=n!, n=0,1,.…. 


由 分 部 积分 可 证 T(t) = (t 一])T(t 一 1) 对 一 切 t>0 成立 (习题 2). 
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集中 在 ,co 上 的 工 全 0 


faw(7)= ii ae y>0, ws>0. (2.2) 
这 里 a > 0 是 平常 的 尺度 参数 ,而 v > 0 是 本 质 的 参数 .特别 fo,1 表示 楷 数 密 
度 , 1.3 节 (3.4) 中 密度 gn 与 fan(n = 1,2,…) 重合 . 简单 的 计算 表明 ,fo,w 的 期 望 
等 于 v/a,， 方差 等 于 u/a2. 
T 密度 族 关于 卷 积 是 封闭 的 : 


fan*fav= fantv HA>0，u>0. (2.3) 


这 个 重要 性 质 推广 了 1.3 节 的 定理 并 经 常 被 应 用 ; 其 证 明 很 简单 . 由 (1.5) 式 , (2.3) 
式 的 左 端 等 于 


He (24) 


经 代 换 y = zt 之 后 ,此 表达 式 和 faswtv (z) 不 同 之 处 仅 在 于 一 个 数值 系数 ; 因为 
fawtv 和 (2.4) 式 两 者 都 是 概率 密度 ， 所 以 这 个 系数 等 于 1. 
在 z= 1 时 , 可 以 通过 (2.4) 式 得 到 所 谓 8 积分 B(J,v). 作为 这 个 证 明 的 副 产 
品 , 我 们 有 
1 
B(u,v) = 人/ (1-y) yldy= 人 A>0，vw>0. (2.5) 
[ 当 上 和 为 整数 时 , 此 公式 已 在 第 1 卷 6.10 节 (10.8) 和 (10.9) 中 应 用 过 . 也 可 见 
本 章 习 题 3.] 
关于 户 。 的 图 像 ， 当 u < 1 时 显然 是 单调 的 ， 且 当 v < 1 时 在 原点 近 旁 是 
无 界 的 . 对 于 v > 1, fi,v 的 图 像 是 钟 形 的 ,在 x = v - 1 处 达到 它 的 最 大 值 (v -- 
TD"-ie-e-D/P(o)， 此 值 接近 于 [2r(u - D]-#( 斯 特 林 (Stirling) 公式 , 第 1 卷 2.12 
节 的 习题 12), 由 中 心 极限 定理 得 出 
Vv ( 些 VvT 
a 


iow ) = n(7), v 一 o0. (2.6) 
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T 密度 在 数理 统计 学 中 起 着 决定 性 的 作用 ,虽然 有 时 不 其 明显 . 首先 , 在 皮尔 
逊 (K. Pearson)(1894) 引进 的 古典 (现在 有 点 过 时 ) 密度 系列 中 , T 密度 作为 II 
型 出 现 . 它 的 经 常 出 现 是 由 于 具有 正 态 密度 n 的 随机 变量 X， 变 量 X? 的 密度 是 
z-#n(zi) = 彤 ,3(Z). 由 卷 积 的 性 质 (2.3) 得 出 : 

*# 本 节 讨论 的 特别 问题 , 以 后 并 没有 用 到 . 
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如 果 Xi …，Xn 是 相互 独 主 的 正 态 随机 变量 ， 期望 为 0, 方差 为 02， 则 XX 十 … 十 
和 具有 密度 /23 

对 统计 学 家 来 说 , x? = X? + … + X2 是 “ 正 态 总 体 的 样本 方差 ", 它 的 分 布 常 
被 应 用 . 由 于 传统 的 理由 (从 皮尔 水 开始 ), f3,3。 称 为 具有 自由 度 n 的 x? 密度 . 

在 统计 力学 中 , X? + x+ X3 表示 质点 速度 的 平方 . 因此 , v(z) = 2zf3,3(z?) 
表示 速度 本 身 的 密度 . 这 就 是 麦克 斯 韦 密度 , 它 在 1.10 节 (10.6) 式 中 用 其 他 方法 求 
出 (也 可 参见 3.4 节 中 的 例 ). 

在 排队 论 中 ,工分 布 常 称 为 埃 尔 朗 (Erlang) 分 布 . 

对 统计 学 家 有 重要 意义 的 一 些 随机 变量 (或 “统计 量 " ) 具有 形式 T= X/Y， 
其 中 X 和 了 是 独立 随机 变量 , Y > 0. 用 下 和 G 分 别 表示 它们 的 分 布 , 和 9 表 
示 它 们 的 密度 . 当 假定 Y 取 正 值 时 , 9 集中 在 05 上 , 因此 ， 


P{T <t} =P{X <tY}= 人 ~ F(ty)g(y)ay. GD) 
由 微分 可 得 出 了 = X/Y 的 密度 
w(t) = f(ty)yg(y)dy. (3.2) 
例 (a) ”如果 X 和 了 具有 密度 有 3.3m 和 及,3n, 则 X/Y 具有 密度 


r(3(m+n)) 奢 m-l 


w(t) = i 3.3 
rm)r (dn) ot OI 的 

事实 上 , (3.2) 式 的 积分 值 等 于 
tm-1 让 yi mt -le-$0+vgy, (3.4) 


ET 
作 代 换 (1 十 by 一 ,可 得 (3.3). 
在 方差 分 析 中 ,我 们 研究 一 种 特殊 情形 : 
X=X?+…+XL 和 VY =Y?+:…+ YY, 
其 中 Xi,.…, Xm, 六 ,…, 汪 是 具有 相同 的 正 态 密度 的 相互 独立 随机 变量, 随机 


变量 下 = (nX/mY) 称 为 斯 内 德 克 (Snedecor) 统计 量 , 它 的 密度 (m/n)jw(m/n)z 称 
为 斯 内 德 克 密度 或 下 密度 . 变量 2 = ln 是 费 希 尔 (Fisher) 的 2 统计 量 ， 它 的 
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密度 称 为 费 希 尔 (Fisher) 的 2 密度 . 当然 , 这 两 种 统计 量 只 是 在 记号 上 有 些 变化 而 
如 


例 (b) 学 生 开 工 密度 . 令 X, 瑟 ,…,Y。 独立 且 具有 相同 正 态 密度 n, 变量 
= = 
T= J (3.5) 
是 统计 学 家 通常 所 说 的 学 生 氏 了 统计 基 . 我 们 知道 它 的 密度 为 
三 Cn -这 rT(¥(n+))) 
2 (1+ #2/n)3n+tD)’ On = 页 rT(#n) 


(3.6) 


事实 上 ，(3.5) 式 中 的 分 子 有 期 望 为 0 方差 为 n 的 正 态 密度 ， 而 分 母 的 密度 为 
2z 广 ntaa). 于 是 (3.2) 式 化 为 形式 


1 和 ns 
re | e+ yndy. (3.7) 
作 变 换 s = 才 (1 + 刀 /m)y2， 上 述 积分 化 为 工 积 分 ,， 即 得 到 (3.6) 式 . > 


2.4 一些 常用 的 密度 


下 面 我 们 不 再 说 明 , 所 有 的 密度 在 所 述 的 区 间 外 恒 等 于 0. 

(a) 双 侧 指数 密度 定义 为 jaereel， 其 中 a 是 尺度 参数 ， 它 具有 期 望 0 与 方 
差 2o-?， 它 是 指数 密度 ae-“=(z > 0) 与 其 镜 象 密度 qe**(z < 0) 的 卷 积 ， 换 句 话 
说 ， 双 侧 指数 密度 是 X1 一 X2 的 密度 ,这 里 Xi 与 X2 独立 且 有 相同 的 指数 密度 
ae (7 > 0). 在 法 国文 献 中 ， 它 通常 称 为 “ 拉 普 拉 斯 (Laplace) 第 二 律 *， 第 一 律 
是 正 态 分布. 

(b) 集中 在 =a,a 中 的 均匀 (或 矩形 ) 密度 p。 和 三 角形 密度 ra 分别 定义 为 


pa(z) = 去 ， ma(z) = i 一 里 ), lzl<a. (4.1) 


容易 看 出 ，pa * p。= Tzo， 用 文字 表示 : 两 个 在 =ava 中 均匀 分 布 的 变量 之 和 在 
36,36 中 有 三 角形 分 布 .| 多 重 卷 积 pe* …*+ pe 已 在 1.9 节 (9.7) 中 叙述 ] 

(0) 在 厅 中 的 8 密度 定义 为 
rly+Y) 
Frw) 


其 中 上 > 0 和 ~w> 0 是 自由 参数 . 由 (2.5) 式 可 知 ，(4.2) 式 确实 定义 了 一 个 概率 密 
度 . 由 (2.5) 式 可 见 ，Bs。 有 期 望 v/(j 十 v) 与 方差 oj/ +u2z( +u+1l]. 如 果 


Do(z) = 


(1 -ziz" 1，0<z<l (4.2) 
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上 <1,v<1, 则 Bw 的 图 是 U 形 的 , 其 极限 趋 于 co. 对 于 上 > Lu > 1, 图 是 钟 形 
的 . 对 于 =v= 1 的 特殊 情形 , 则 得 到 均匀 密度 . 
有 密度 的 一 个 简单 变形 定义 为 
1 1 TU + tr 
F(t) 一 OECDJ QF 
如 果 变量 X 的 密度 为 (4.2), 则 Y = -1! 一 1 的 密度 为 (4.3). 

在 皮尔 还 系列 中 , 密度 (4.2) 和 (4.3) 作为 I 型 和 VI 型 出 现 . 斯 内 德 克 (Snedecor) 
密度 (3.3) 是 (4.3) 的 特殊 情形 . 密度 (4.3) 常 以 经 济 学 家 帕 雷 托 (Pareto) 来 命名 . 可 
以 认为 (从 现代 统计 学 观点 来 看 是 比较 自然 的 ), 收入 分 布 的 尾部 当 z 一 oo 时 其 密 
度 近似 于 4z-“,(4.3) 满足 这 一 要 求 . 

(d) 著名 的 反正 强 密 度 


0<t<o0. (4.3) 


1 
xVrI(1—7z) 
实际 上 和 6 密度 B3,} 相同 , 但 是 因为 它 在 起 伏 理论 中 经 常 出 现 ， 所 以 应 该 特别 陈 
述 ( 它 在 第 1 卷 3.4 节 中 引入 ,因为 它 与 带 留 时 间 的 意外 性 质 有 关 ). 遗 恨 的 是 , 被 
人 误解 的 名 称 在 广泛 流传 ,实际 上 分 布 函 数 为 2r :arcsinVZ.( 具 有 +uw=1 的 有 
密度 经 常 是 指 “ 广 义 反正 弦 密 度 ”.) 
(e) 以 原点 为 中 心 的 柯 西 (Cauchy) 密 度 定 文 为 


Oa (4.4) 


* ?et(z) = —o00<Zz<o%0, (4.5) 


| 
A 
其 中 t> 0 是 尺度 参数 . 相应 的 分 布 函 数 是 


3 + -larctan(2/t). 


% 的 图 形 与 正 态 密度 的 图 形 相似 , 但 是 它 接近 坐标 轴 很 缓慢 ,以致 于 期 望 不 存在 . 
柯 西 密度 的 重要 性 是 由 于 卷 积 公 式 


Ye * Ye = Yott- (4.6) 


它 说 明 柯 西 密度 族 (4.5) 对 卷 积 运算 封闭 . 公式 (4.6) 可 以 用 初等 (但 是 乏味 ) 的 方法 
把 被 积 函数 分 解 为 部 分 分 式 来 证 明 . 比较 简单 的 证 明 可 用 传 里 叶 分 析 . 

卷 积 公式 (4.6) 有 一 个 惊奇 的 结论 : 对 于 具有 相同 密度 (4.5) 的 独立 变量 X1,…， 
Xn， 它们 的 平均 (Xi 十 … 十 Xm)/n 与 XX; 有 相同 的 密度 . 
例 考虑 一 个 实验 室 的 试验 , 用 垂直 反射 镜 把 水 平 光线 投射 到 墙壁 上 . 此 镜 围 绕 经 
过 4 的 垂直 轴 自 由 旋转 . 假定 反射 光线 的 方向 是 “随机 地 "” 选取 , 即 它 与 墙壁 的 垂 
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线 ho 的 夹 角 , 在 -3 和 Br 之 间 是 均匀 分 布 的 . 光线 与 墙壁 相交 于 一 点 , 它 到 
原点 O 的 距离 为 
X=t:tanp 

(其 中 上 是 墙壁 到 中 心 4 的 距离 40). 显然 , 随机 变量 X 具有 密度 (4.5) 人 如 果 试 
验 重复 了 n 次 , 则 平均 值 (X1 +… 十 Xn)/n 有 相同 的 密度 , 像 大 数 定律 那样 ,我 
们 可 以 推 知 , 平均 值 不 集中 在 0 的 周围 . > 

柯 西 密度 有 一 个 奇妙 的 性 质 : 如 果 X 的 密度 为 x, 则 2X 的 密度 为 Yat = Txt， 
因此 , 2X = XX+XX 是 两 个 相关 变量 之 和 , 但 是 它 的 密度 却 由 卷 积 公式 给 出 . 更 一 般 
地 , 如 果 忆 和 站 是 两 个 具有 共同 密度 Y 的 独立 变量 , 且 X=aUt+bV,Y =cU+dV， 
则 和 +Y 的 密度 为 Ye+t+c+dt， 它 是 X 的 密度 Yo+bt 与 Y 的 密度 Ye+dt 的 卷 
积 ; 然而 , X 和 了 并 不 独立 . (有 关 的 例子 可 见 3.9 节 中 的 习题 1.) 

[ 柯 西 密度 相当 于 学 生 氏 人 密度 族 (3.5) 当 n = 1 时 的 特殊 情形 . 换 句 话说 , 如 
果 X 和 了 是 具有 正 态 密度 n 的 独立 随机 变量 ， 则 X/IY| 有 柯 西 密度 (4.5), 其 中 
t = 1. 一 些 有 关 的 密度 见习 题 5 和 习题 6:] 

T 密度 的 卷 积 性 质 (2.3) 看 来 好 像 (4.6) 式 , 但 是 有 一 个 重大 差别 ， 即 密度 
的 v 是 本 质 参数 , 而 (4.6) 式 只 含 一 个 尺度 参数 . 关于 柯 西 密度 的 类 型 是 稳定 的 . 这 
种 在 卷 积 运算 下 的 稳定 性 , 为 正 态 密度 和 柯 西 密度 所 共有 ; 差别 在 于 尺度 参数 分 别 
具有 法 则 只 = 只 十 o 和 t+= 忆 十 妃 . 除 此 之 外 , 还 存在 着 有 类 似 性 质 的 其 他 稳定 
密度 , 用 专门 的 术语 来 说 , 我 们 把 正 态 密度 和 柯 西 密度 分 别称 为 “指标 为 2 和 1 的 
对 称 稳定 密度 ” 这 6.1 节 .) 

(f) 指标 为 = 3 的 单 侧 稳定 分 布 ， 如 果 所 是 形 如 (1.6) 的 正春 分 布 ， 则 


=2[1—R|(a/Vz)], z>0, (4.7) 
确定 了 一 个 分 布 函数 , 它 的 密度 是 


= -9_._L -io/ 
fa(z) = J ，z>0. (4.8) 


显然 它 的 期 望 不 存在 . 这 个 分 布 已 在 第 1 卷 3.6 节 (6.8) 中 出 现 ， 又 在 第 1 卷 10.1 
节 中 作为 常 返 时 间 分 布 的 极限 而 求 出 ,并 且 这 个 推导 隐 含 着 合成 法 则 


fa*fe= 所 ， 其 中 Y=a+pB. (4.9) 


@ 简单 地 改 述 这 个 试验 就 得 到 卷 积 公式 (4.6) 的 物理 解释 . 我 们 的 论证 指出 ,如 果 把 一 个 单位 的 光源 
放 在 原点 ,那么 Ye 就 表示 光 的 强度 沿 着 zy 平面 上 直线 y = t 的 分 布 ， 于 是 (4.6) 表示 囊 更 斯 
(Huygens) 原理 , 据 此 原理 , 光 的 强度 沿 着 y = s 十 t 的 分 布 情形 , 似乎 和 光源 在 直线 y 一 上 上 按 
密度 mY 分 布 时 的 情形 相同 .( 我 感谢 沃 尔 什 (J. W. Walsh) 的 这 个 解释 .) 
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(用 初等 但 较 麻烦 的 积分 运算 来 验证 也 是 可 行 的 . 用 传 里 叶 分 析 来 证 明 则 比较 简单 .) 
如 果 X1,…, Xn 是 具有 分 布 (4.7) 的 独立 随机 变量 ， 则 (4.9) 式 隐 含 着 (Xi1 十 … 十 
3)n -与 其 有 相同 的 分 布 , 因此 平均 值 (Xi + … 十 Xn)m 1 似乎 与 m 有 相同 的 数 
量 级 ; 在 不 收敛 时 ,它们 的 增加 将 是 无 界 的 (参看 习题 7 和 习题 8). 


(8) 形 如 e 一 “(z > 0,a > 0) 的 分 布 的 出 现 与 顺序 统计 量 有 关 (见习 题 8). 它们 和 其 
变形 1 一 e-” 一 起 以 书 布尔 (Weibull) 分 布 的 名 称 (有 点 难以 理解) 出 现在 统计 可 靠 性 理论 中 . 
(h) 逻辑 斯 讳 分 布 函 数 
1 


Ts o>0, (4.10) 


PO = ITe 


可 用 于 预报 . 大 量 文献 都 试图 建立 一 个 直观 的 “逻辑 增长 律 ”; 只 要 单位 选 得 适当 , 实际 上 
所 有 的 增长 过 程 都 可 用 形 如 (4.10) 式 的 函数 表示 ， 式 中 t 表示 时 间 . 通过 x? 对 元 长 的 数 
表 的 检验 支持 了 有 关 人 类 总 体 、 细菌 群体 、 铁 路 发 展 等 问题 符合 此 律 . 已 经 发 现 动 植物 的 高 
度 和 重量 二 者 都 遵循 逻辑 律 ,虽然 从 理论 上 讲 , 很 明显 , 这 两 个 变量 不 能 有 同样 的 分 布 . 实 
验 室 里 关于 细菌 的 试验 表明 ， 即 使 没有 系统 的 影响 也 能 出 现 其 他 的 结果 .总 体 理论 依赖 于 
逻辑 外 推 法 (即使 它 表 明 是 不 可 靠 的 ). 在 理论 上 仅 有 的 矛盾 是 , 不 但 逻辑 分 布 , 而 且 正 态 分 
布 、 柯 西 分 布 , 还 有 其 他 分 布 , 都 可 以 适用 于 同一 资料 , ?这 一 资料 具有 一 致 的 或 较 好 的 拟 
合 优 度 . 在 这 个 竞赛 中 , 与 其 他 分 布 比较 ,逻辑 分 布 并 不 起 显著 作用 ; 而 大 多 数 非 逻辑 分 布 
的 理论 模型 却 为 同一 观测 资料 所 支持 . 

这 种 仅 从 拟 合 程度 出 发 用 菜 种 模型 来 描述 总 体 的 理论 是 短命 的 , 因为 它 没有 提供 新 的 
方法 ,并 且 对 同一 旧事 物 所 得 到 的 各 种 新 证 实 立即 产生 牙 盾 . 但 是 ,这 种 自然 的 推理 并 未 
被 常识 所 代替 ,因此 它 有 助 于 清楚 地 说 明 单纯 拟 合 优 度 是 怎样 使 人 发 生 误解 的 . 


2.5 ”随机 化 与 混合 
令 下 是 依赖 于 参数 9 的 分 布 函数 , v 是 某 个 概率 密度 ， 则 


W(z) = ~ F(z,0)u(0)do (5.1) 


是 从 0 增加 到 1 的 z 的 单调 函数 , 因而 是 一 个 分 布 函 数 . 如 果 F 的 连续 密度 为 f， 
则 WW 的 密度 为 ws 


w(z) = 了 ~ f(z,0)u(0)de. (5.2) 


® W. Feller, On the logistic law of growth and its empirical verifications in biology, Acta 
Biotheoretica, vol. 5 (1940), pp. 51-66. 
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代替 关于 密度 的 积分 ,我 们 可 以 对 离散 概率 分 布 求 和 : 如 果 bi,b2,… 是 任意 选 
取 的 , 且 pe >0, 志 mk=1 则 


u(z) = 》 f(z, Ok)pk (5.3) 
k 


定义 了 一 个 新 的 概率 密度 . 在 概率 上 可 以 把 这 个 步骤 称 为 随机 化 ; 参数 9 被 作为 随 
机 变量 , 而 新 的 概率 分 布 被 定义 在 zb 平面 上 , 此 平面 就 作为 样本 空间 . 形 如 (5.3) 
式 的 密度 称 为 混合 密度 . 这 个 术语 现在 一 般 被 用 在 形 如 (5.1) 的 分 布 和 (5.2) 的 密度 
上 ; 

在 此 我 们 不 打算 导出 一 般 的 理论 , 而 是 企图 用 几 个 例子 来 说 明 这 个 方法 的 应 用 
范围 及 其 概率 内 容 . 这 些 例子 还 可 以 作为 条 件 概率 概念 的 准备 .2.6 节 专门 讨论 由 
连续 参数 的 随机 化 而 得 到 的 离散 分 布 的 例子 . 最 后 , 2.7 节 说 明 出 自 随机 游 动 的 连续 
过 程 的 构造 ; 作为 副产品 , 我 们 将 得 到 一 些 分 布 , 它们 在 许多 应 用 中 和 需要 严格 的 
计算 中 经 常 出 现 . 

例 (a) ” 比 . 如果 X 是 具有 密度 f 的 随机 变量 , 则 对 于 固定 的 y > 0, 变量 X/y 的 
密度 为 f(zy)y. 将 参数 y 视 为 密度 为 9 的 随机 变量 ,我们 得 到 一 个 新 的 密度 


wo = few)ay. (6) 


此 式 和 (3.2) 相同 , 而 2.3 节 的 讨论 就 是 以 此 为 基础 的 . 

用 概率 的 语言 说 , 把 X/y 中 的 分 母 y 随机 化 指 的 就 是 考虑 随机 变量 X/Y, 我 
们 仅仅 再 讲 一 下 X/Y 的 密度 (3.2) 的 推导 . 在 这 种 特殊 情形 , 术语 是 一 个 有 趣 的 问 
题 . 
例 (b) ”随机 和 . 令 Xi,X2,… 是 具有 相同 密度 7 的 独立 随机 变量 . 和 Sn = Xi 十 … 
十 Xn 的 密度 为 f”, 即 f 本 身 的 n 重 卷 积 ( 见 1.2 节 ). 项 数 n 是 一 个 参数 . 现在 我 
们 用 概率 分 布 P{N = n} = pn 把 它 随机 化 . 具有 随机 项 数 N 的 总 和 Sw 的 密度 是 


也 一 Sof™. (5.5) 
1 


作为 一 例 ， 取 {pn} 为 几何 分 布 pn = gp"!,f 取 指 数 密度 . 于 是 fn* = gn 由 (2.2) 

式 给 出 , 且 

li(azj" _ 
[CT 


ey 
wz) = gae Dp" ae 一 "qz ， (5.6) 
n=1 


例 (c) ”对 排队 的 应 用 . 考虑 一 个 服务 时 间 按 指数 分 布 (密度 f(t) = He-) 的 服 
务 员 ,假定 来 到 的 服务 具有 泊 松 型 ， 即 依次 到 达 之 间 的 时 间 是 独立 的 且 具 有 密度 
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Me, 和 <. 这 模型 已 在 第 1 卷 17.7 节 (b) 中 侵 述 . 到 达 的 顾客 排 成 一 条 (可 能 是 
空 的 ) “等 待 线 ", 按照 到 达 的 次 序 不 间断 地 得 到 服务 . 

考虑 某 个 顾客 ,在 他 到 达 时 等 待 线 上 已 有 n > 0 个 顾客 . 他 在 服务 员 那 里 所 花 
的 总 时 间 , 是 这 n 个 顾客 所 花 的 时 间 加 上 他 自己 被 服务 的 时 间 的 总 和 . 这 是 一 个 具 
有 密度 f+1* 的 随机 变量 . 我 们 在 第 1 卷 17.7 节 (7.10) 已 经 看 到 , 在 正常 状态 时 ， 
等 待 线 上 恰 有 n 个 顾客 的 概率 等 于 gp",， 其 中 了 = 和 A/p. 假定 处 在 正常 状态 , 我 们 
看 出 ,顾客 在 服务 员 那 里 花 的 总 时 间 了 是 一 个 有 下 列 密度 的 随机 变量 ; 


BD apf Dt) = gqpet: (ppt)" /nt = (p — Ne HY:, 
n=0 n=0 

因此 E(T) = 1/(4 一 入 -( 见 习题 10.) 

例 (d) ”公交 车 的 等 待 线 . 假定 公交 车 计划 在 每 小 时 整 开 出 一 辆 , 但 可 能 被 耽误 . 
我 们 把 接连 的 耽误 时 间 记 为 X:，, 它 作为 具有 共同 的 分 布 F 和 密度 f 的 独立 随机 
变量 . 为 了 简单 起 见 , 假定 0 < Xk < 1. 以 Ts 表示 在 下 午 某 时 刻 z < 1 到 达 的 人 
等 待 的 时 间 . 列 入 下 午 行车 计划 中 的 公交 车 已 经 开 出 的 概率 为 F(z), 容易 看 出 9 


Ptm < 中- { F(t+7) ~ F(z), 当 0 < t< 1 一 z 时 ， (5.7) 


1— F(z)+ F(z)F(t+z-1), 当 1-z<t<2—ZzH, 
显然 , 当 t>2 一 tz 时 , P{T 和 二 =1. 相应 的 密度 为 


人 当 0 <t < 1 一 z 时 ， 


Flzjft+z-D， 1-z<t<2 -Ny. (5.8) 


这 里 到 达 时 刻 z 是 一 个 自由 参数 ， 把 它 随机 化 是 很 自然 的 . 例如 ， 对 于 “随机 地 ” 
到 达 的 乘客 ， 他 的 到 达 时 刻 是 一 个 在 古 I 中 均匀 分 布 的 随机 变量 . 此 时 期 望 等 待 时 
间 为 了 +o2, 其 中 o? 是 耽误 的 方差 . 换 句 话 说 ,如果 公 交 车 是 准时 开 出 的 ， 那么 
期 望 等 待 时 间 最 小 , 并且 它 随 着 耽误 方差 的 增加 而 增加 .( 见 习题 11 和 习题 12.) 


2.6 离散 分 布 
本 节 致 力 于 迅速 地 看 一 看 二 项 分 布 和 泊 松 分 布 随 机 化 的 一 些 结果 .在 贝 努 利 
试验 中 成 功 次 数 Sn 的 分 布依 赖 于 成 功 概率 p. 将 p 当 作 密 度 为 u 的 随机 变量 , 得 


@ (5.7) 的 后 一 等 式 不 易 看 出 ， 可 用 如 下 方式 证 , {Tz 和 甘 = {Xi > 2z}U{X1 和 zn{X2 < 
t 十 工 一 车 . 一 一 译 者 注 
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到 一 个 新 的 分 布 
P{S, = 月 = ( " ) [/ pe ptulpdp, k=0eesn (61) 


例 (a) ” 当 w(p) =1 时, 由 分 部 积分 表明 , (6.1) 式 与 & 无 关 , 且 (6.1) 化 为 离散 均 
习 分 布 P{Sn = 有 = (n+1)-1. 更 好 的 说 明 是 贝 叶 斯 (Bayes) 的 论证 . 考虑 n 十 1 
个 在 古 I 中 均匀 分 布 的 独立 变量 Xo,…, Xn.(6.1) 式 ( 式 中 心 = 1) 的 积分 等 于 在 变 
基 XXX 中 恰 有 天 个 小 于 Xo 的 概率 , 或 者 说 , 等 于 在 诸 点 Xo,… ,Xn 按 数 
值 大 小 的 排列 中 ,Xo 排 在 第 (上 + 1) 位 置 上 的 概率 . 但 是 由 于 对 称 性 , 每 个 位 置 都 
是 等 可 能 的 ,因此 积分 等 于 (十 D) > 

用 赌博 的 语言 来 说 , (6.1) 式 对 应 于 这 种 情况 : 随机 地 选取 一 个 不 均匀 硬币 , 并 
用 这 种 结构 未 知 的 硬币 进行 试验 . 在 财 徒 看 来 , 试验 不 能 认为 是 独立 的 . 事实 上 , 如 
果 观 察 到 很 长 的 正面 序列 , 那么 下 面 的 认识 就 变 得 自然 了 : 对 此 硬币 , p 接近 于 1， 
因而 不 妨 赌 更 多 次 出 现 正面 . 这 样 两 个 范例 可 以 说 明 这 种 类 型 的 估计 与 预测 问题 . 
例 (b) ”给 定 n 次 试验 有 上 次 成 功 (等 于 假设 互 ), 问 事件 p < a 的 概率 是 多 少 ? 
根据 条 件 概率 的 定义 ， 


plan 人 wa- 


P{AIH} = 
Of ep 


(6.2) 


巴 叶 斯 用 到 了 具有 wu(p) = 1 的 这 类 估计 . 我 们 的 模型 的 结构 ( 即 在 实际 上 ， 如果 我 
们 讨论 的 是 具有 已 知 密度 的 各 种 硬币 总 体 ) 就 适合 这 个 程序 . 困难 在 于 : 当 看 到 
不 是 随机 化 的 时 候 , 它 仍 不 分 青红皂白 地 被 用 来 判断 “原因 的 概率 ”; 这 一 点 已 在 
关于 所 谓 “明天 出 太阳 的 概率 ”的 问题 (第 1 卷 5.2 节 例 (e)) 中 充分 讨论 过 . 

例 (c) ”上面 的 一 个 变形 可 氢 述 如 下 . 给 定 n 次 试验 有 上 次 成 功 , 问 以 后 的 m 次 
试验 中 有 ; 次 成 功 的 概率 是 多 少 ? 由 前 面 的 论证 可 得 到 下 列 答案 : 


( i pit*(1 — p)™+n iku(p)dp 


(6.3) 
[ pr(1 Dp)"-Ku(p)dp 


(见习 题 13.) 
转 到 泊 松 分 布 , 我们 把 它 解释 为 在 长 度 为 t 的 时 间 内 ,准点 “到达” 次 数 . 期 
望 到 达 次 数 是 at. 我 们 从 概念 上 来 说 明 两 个 不 同 的 随机 化 方式 . 
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例 (d) ”随机 化 的 时 间 . 如 果 时 间 间 隔 的 长 度 是 一 个 具有 密度 4 的 随机 变量 , 则 恰 
有 大 次 到 达 的 概率 pk 是 
oo 大 
Pk =/ eo uat. (6.4) 


例如 , 如 果 时 间 间 隔 的 长 度 是 指数 分 布 的 , 则 k= 0,1,… 次 新 到 达 的 概率 等 于 
pk = [ et (ot gat = 二 


这 是 一 个 几何 分 布 . 

例 (e) “分 层 . 假设 有 一 些 随机 到 达 的 能 源 , 每 个 能 源 有 泊 松 输出 , 但 是 参数 不 同 . 
例如 , 植物 在 固定 的 曝光 时 间 t 内 发 生 的 偶然 事件 可 以 假定 为 泊 松 变量 , 但 是 参数 
将 随 各 种 植物 而 异 . 类 似 地 , 发 生 于 个 别 单位 的 电话 呼叫 可 以 是 泊 松 变量 , 各 个 单 
位 有 不 同 的 期 望 呼叫 次 数 . 在 这 过 程 中 , 参数 a 作为 具有 密度 v 的 随机 变量 ,在 时 
间 t 内 恰好 n 次 到 达 的 概率 为 


Plt) = / -ee 伺 ul(a)da. (6.6) 
0 
对 于 工 密度 4= jp,v+l 这 种 特殊 情形 ， i 


m0- ("TP)(A) GR) 


这 是 波 利 亚 (Polya) 分 布 的 极限 形式 , 此 分 布 在 第 1 卷 5.8 节 习 题 24 和 第 1 卷 17.10 
节 (102)( 令 6= ar5y= arl-1) 中 给 出 . 


zea(aes), (6.5) 


关于 假 传 染病 的 注 ”一 个 奇特 而 有 益 的 历史 就 联系 到 分 布 (6.7) 及 其 两 重 性 . 

导致 (6.7) 式 的 波 利 亚 钠 子 模型 和 波 利 亚 过 程 是 真传 染病 模型 ， 其 中 每 一 个 意外 事故 
的 发 生 , 确实 增加 了 将 来 意外 事故 的 概率 . 这 个 模型 很 享 盛名 , 且 (6.7) 式 在 实际 上 适合 于 
各 种 现象 , 用 它 来 描述 真传 染病 的 特征 是 很 适合 的 . 

同一 分 布 (6.7) 早 在 1920 年 由 格林 伍德 (M. Greenwood) 和 尤 尔 (G. U. Yule) 同时 推 
导出 , 他 们 的 意见 是 , 良好 的 氢 合 将 驶 斥 了 传染 病 的 模型 . 其 推导 大 体 上 等 价 于 我 们 的 分 层 
模型 ， 这 模型 从 强调 泊 松 过 程 即 假定 没有 后 效 开 始 . 于 是 有 一 个 惊人 的 事实 同一 分 布 的 
良好 拟 合 可 以 用 本 质 及 实际 含义 都 完全 相反 的 方式 来 解释 . 这 一 点 可 以 作为 对 那些 将 统计 
资料 作 过 分 轻率 解释 的 忠告 . 

关于 假 传染 病 的 现象 的 解释 已 经 在 第 1 卷 5.2 节 (d) 中 叙述 了 , 并 和 上 面 (6.1) 式 有 
关 . 这 样 , 在 长 度 为 s 的 时 间 内 观察 到 m 个 意外 事故 , 使 我 们 可 以 用 类 似 于 (6.3) 式 , 去 估 
计 在 将 来 长 度 为 上 的 时 间 内 发 生 n 个 意外 事故 的 概率 . 其 结果 将 依赖 于 m, 但 是 这 种 依赖 
性 是 由 于 抽样 方法 , 而 不 是 由 于 它 的 本 质 ; 关于 过 去 的 信息 能 使 我 们 更 好 地 预测 样本 的 将 
来 性 质 , 而 不 会 与 整个 总 体 的 未 来 混同 起 来 
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2.7 ” 贝 塞 尔 函 数 与 随机 游 动 


在 扩散 理论 、 排 队 论 和 其 他 应 用 中 相当 多 的 显示 解 包含 有 贝 塞 尔 (Bessel) 函 
数 . 通常 很 少 能 明显 地 用 解 来 表示 概率 分 布 , 分 析 理 论 要 求 得 出 它们 的 拉 普 拉 斯 变 
换 , 而 用 其 他 关系 则 比较 复杂 . 幸好 , 所 讨论 的 (和 更 多 的 ) 分 布 可 以 用 简单 的 随机 
化 方法 来 获得 . 用 这 种 方法 可 使 关系 式 去 掉 了 偶然 性 , 从 而 避免 许多 困难 的 分 析 . 
阶 为 p > -1 的 贝 塞 尔 函 数理 解 为 对 全 体 实数 z 定义 的 函数 I 


2 十， 
Ll(z) = Demet 全 (7.1) 


我 们 用 三 个 方式 来 得 出 包含 贝 赛 尔 函数 的 三 种 不 同类 型 分 布 . 

(a) 随机 化 的 工 密度 

固定 p > -1, 考虑 (2.2) 式 的 工 密 度 户 ,o+k+l' 令 参数 上 为 服从 泊 松 分 布 的 整 
值 随机 变量 . 按照 (5.3), 我 们 得 到 一 个 新 密度 


oo 让 tzptk 
up(z) =e》 fiptket1(2) =e (7.2) 
2 Sr 


比较 (7.1) 与 (7.2) 中 各 项 , 可 以 看 出 
aop(z) = e+* Vz/t)P 1 (2Vtz), £ > 0. (7.3) 


如 果 p > -1 则 wp 是 集中 在 0,00 上 的 概率 密度 . (对 于 p = -1, 右边 关于 > 是 不 
可 积 的 .) 注意 , t 不 是 尺度 参数 , 因此 这 些 密度 是 属于 不 同类 型 的 . 
顺便 提 一 句 ,由 这 个 构造 和 工 密度 的 卷 积 公 式 (2.3), 显然 有 


Wp *# flv = Wptv. (7.4) 


(b) 随机 化 的 随机 游 动 

在 讨论 随机 游 动 中 ,通常 我 们 假设 接连 的 跳跃 发 生 在 时 刻 1,2,…. 然而 很 清 
楚 , 这 个 约定 仅 使 描述 生动 而 已 ,模型 与 时 间 完 全 无 关 . 一 个 真正 的 时 间 连 续 随 机 
过 程 是 由 普通 的 随机 游 动 依 下 面 规定 而 得 出 的 : 接连 两 次 跳跃 的 间隔 时 间 是 具有 
相同 密度 e-! 的 独立 随机 变量 . 换 句 话说 ,跳跃 时 刻 被 一 个 泊 松 过 程 所 支配 , 而 跳 

@ 按照 标准 的 用 法 , Ip 是 “修正 的 " 贝 塞 尔 函 数 或 “具有 开 自 变量 " 的 贝 塞 尔 函数 “通常 的 " 贝 塞 尔 


函数 常 表 示 为 Jp， 它 是 在 (7.1) 式 右边 插入 《一 1)* 来 定义 的 . 我 们 用 术语 贝 塞 尔 函 数 是 一 个 通用 
的 称呼 ,而 不 含有 新 内 容 ，、 
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了 路 高 度 是 分 别 以 概率 p 和 g 取 值 +1 和 -1 的 随机 变量 , 这 些 变量 彼此 独立 并 构成 
泊 松 过 程 

对 于 与 随机 游 动 有 关 的 每 个 分 布 , 都 对 应 于 一 个 时 间 连 续 过 程 的 分 布 , 此 过 程 
在 形式 上 是 由 跳跃 次 数 的 随机 化 而 获得 的 . 为 此 , 我 们 详细 地 研究 在 给 定时 刻 + 上 
的 位 置 . 在 基本 的 随机 游 动 中 , 为 使 第 n 步 到 达 位 置 + > 0, 当 且 仅 当 在 前 n 次 跳 
路 中 ,3(n+7) 是 正 的 ,3(n -站 是 负 的 . 这 只 有 当 n 一 + = 2v 是 偶数 时 才 行 .此 
时 , 在 第 n 次 跳 路 后 恰好 处 在 位 置 > 的 概率 是 


ed 区 ( Te J (7.5) 
r+v 


n 
( 了 + 人 
在 我 们 的 泊 松 过 程 中 , 直到 时 刻 t 恰好 发 生 n = 2v +7 次 跳跃 的 概率 是 e-tt"/nl， 
因此 在 我 们 的 时 间 相关 过 程 中 , 在 时 刻 上 处 于 位 置 r > 0 的 概率 等 于 
ed 7 二 二 
| )z = Vp/q)"e (2VPaD) (7.6) 
我 们 得 到 两 个 结论 ， 
(i) 对 于 7 = 1,2,3,…, 如 果 定义 I_+ = 五 , 则 对 于 固定 的 t > 0,p,q， 


ar(t) = V(p/q)"e Ir(2VPGt), 7=0,+1,+2,.…, (7.7) 
表示 某 个 概率 分 布 ( 即 ar > 0, Zar = 1). 
全 ) 在 时 间 相关 随机 游 动 中 , ar(t) 等 于 在 时 刻 处 于 位 置 7 的 概率 ， 


两 个 贝 塞 尔 函数 的 著名 公式 是 这 个 结果 的 直接 推论 . 首先 , 由 变量 替换 2Vpat = 
Z 和 p/g = 刀 , 恒等式 Far(t) =1 变 为 


ezeete ) ~ 》 ur 三 (o). (7.8) 


这 就 是 所 谓 的 贝 塞 尔 函 数 的 母 函 数 或 施 勒 米 希 (Schl6milch) 公 式 (此 公式 有 时 作为 I 
的 定义 ). 


其 次 ， 由 过 程 的 本 质 显然 可 见 ， 概 率 ar(t) 必须 满足 查 普 曼 - 科 尔 莫 龙 罗 夫 
(Chapman-Kolmogorov) 方程 


ar(t+7)= ba ak(b)ar-k(7). (7.9) 


大 = 一 co 
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此 式 表 示 , 在 时 刻 上 质点 应 当 位 于 某 一 位 置 g 并 从 大 转移 到 "等 价 于 从 0 转移 到 
7 一 k. 在 17.3 节 中 我 们 将 再 来 讨论 这 个 关系 式 .[ 此 式 直 接 由 表达 式 (7.6) 和 随机 游 
动 中 类 似 的 概率 公式 , 容易 得 到 验证 .] 查 普 曼 - 科 尔 莫 戈 罗 夫 方 程 (7.9) 等 价 于 


L(t+7)= bb 下 (三 -kr). (7.10) 
天 一 一 oo 
这 就 是 著名 的 诺 伊 曼 (K. Neumann) 人 恒等式 . 
(c) 首次 通过 
为 了 简单 起 见 , 我 们 把 注意 力 放 在 对 称 的 随机 游 动 上 , 即 p = 4 = 按照 第 1 
卷 3.7 节 (7.5), 首次 通过 点 7 > 0 发 生 在 第 2n 一 r 次 跳 九 上 的 概率 是 


2n— 
Ee :( 2 je n>r. (7.11) 
n 


如 果 随 机 游 动 是 常 返 的 , 则 这 样 的 首次 通过 以 概率 1 发 生 , 即 对 于 固定 的 +, 数量 
(7.11) 相 加 得 1. 在 我 们 的 时 间 相 关 过 程 中 , 第 上 次 跳跃 的 时 刻 有 工 密度 (2.2). 由 
此 得 到 , 首次 通过 7 > 0 的 时 刻 具 有 密度 


亿 2m 一 也 
bp 272n+tr fi an_r(t) 
n 


2m 一 7 n 
Bt r (2n —7)! (7.12) 
一 et 同 一 2n+r 
(a @n—r—1)! (#5=) mr 
=e-!31(0). 


因此 , (i) 对 于 国定 的 7 二 1,2,…， 


tT 


w(t) = eTh(O), (7.13) 


定义 了 某 个 集中 在 0,00 上 的 概率 密度 ; 

(ii) 首次 通过 7 > 0 的 时 刻 具 有 密度 wr (见习 题 15). 

这 个 推导 还 有 另 一 个 有 趣 的 结论 . 在 时 刻 上 首次 通过 > + p, 蕴含 着 在 某 时 刻 
5 <t 先 首次 通过 >. 由 于 在 时 间 间 隔 0,s 和 5t 中 跳跃 的 独立 性 以 及 指数 等 待 时 间 
的 缺乏 记忆 性 , 我 们 应 有 

Vr * Vp 一 Wr+p- (7.14) 

[如 果 利 用 相应 的 卷 积 性 质 于 概率 (7.11), 则 由 (7.12) 通过 计算 验证 (7.14) 是 容易 
的 
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实际 上 ， 命 题 (i) 和 关系 式 (7.14) 对 于 所 有 取 正 值 的 参数 与 p 都 是 正确 
的 .9 


2.8” 贺 上 的 分 布 


半 开 区 间 0,1 可 用 来 表示 单位 长 的 圆 上 的 点 , 这 比 用 整 条 线 绕 在 圆周 上 更 好 
于 是 圆 有 了 一 个 方向 ， 弧 长 的 值 从 -oo 至 oo, 但 z,z 土 1,z 土 2,，… 应 理解 为 同一 
点 . 加 法 运算 的 模 是 1， 如 同 角 的 加 法 运算 的 模 是 2r 一 样 .在 圆 上 的 概率 密度 是 一 
个 周期 函数 六 > 0,， 使 


f plz)dz =1. (8.1) 
0 


例 (a) 。 薄 丰 (Bufion) 投 针 问题 (1777). 传统 的 叙述 如 下 . 将 平面 分 成 为 平行 于 Y 办 
的 宽度 为 1 的 若干 带 形 . 随机 地 投效 一 根 长 度 为 1 的 针 . 问 它 穿 过 两 个 带 形 的 概率 
是 多 少 ? 为 了 说 明 问 题 ,首先 在 形式 上 考虑 针 的 中 心 . 它 的 位 置 由 两 个 坐标 决定 , 但 
是 y 不 必 考 虑 ,并且 把 = 按 模 1 来 缩减 即 取 z 的 小 数 部 分 ) . 这 样 ,“ 针 的 中 心 
变 成 为 图 上 的 具有 均匀 分 布 的 随机 变量 X. 针 的 方向 可 以 用 针 与 y 轴 的 夹 角 ( 依 顺 
时 针 方向 测量 ) 来 确定 . 针 旋转 了 一 个 x 角 ， 又 恢复 到 原来 的 位 置 ,因此 夹 角 仅 可 
被 确定 直到 r 的 整数 信 . 我 们 用 Zn 来 表示 . 在 应 丰 投 针 问题 中 , 可 以 推 知 X 和 2 
是 在 长 度 为 1 的 图 上 均匀 分 布 的 独立 变 最 9. 

如 果 我 们 选用 0 与 1 之 问 的 值 表示 X, -与 3 之 间 的 值 表示 Z， 那么 为 使 针 
穿 过 边界 , 当 且 仅 当 


BcosZn >X 或 jeosZn > 1—X. 


对 于 给 定 在 -二 与 二 之 间 的 = 值 ，X < 3cos zn 的 概率 和 1 一 X < 3cos zr 的 概率 
相同 ， 即 等 于 3cos zm. 因此 ， 所 要 求 的 概率 是 

[ye= 2. (8.2) 

直线 上 的 随机 变量 X 可 按 模 1 缩减 以 得 到 图 上 的 随机 变量 X, 数值 计算 中 的 

® W. Feller,Infinitely divisible distributions and Bessel functions associated with random 


‘walks, J. Soc. Indust. Appl. Math., vol.14 (1966), pp. 864—875. 
@ 对 侦 (X,2) 的 样本 空间 是 一 个 回环 面 - 
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合 入 误差 就 是 这 种 类 型 的 随机 变量 . 如 果 X 有 密度 f, 则 "X 的 密度 为 @ 
elz) = 》 f(r+n). (8.3) 


从 而 直线 上 的 每 一 个 密度 导出 圆 上 的 一 个 密度 .[ 由 19.5 节 看 出 , 利用 傅 里 叶 (Fourier) 
级 数 , 同一 ” 允许 有 完全 不 同 的 表示 式 . 对 于 正 态 密度 的 特殊 情形 ， 见 19.5 节 例 
(9] 
例 (b) ” 席 加 莱 (Poincare) 轮 可 赌 问题 . 研究 轮 盘 的 转动 次 数 , 把 它 看 作 集中 在 正 
半 轴 上 具有 密度 7 的 随机 变量 X. 观察 最 后 的 结果 ， 即 轮 盘 停 下 来 的 点 "OX, 它 是 
变量 X 按 模 1 被 缩减 而 得 的 变量 . 它 的 密度 为 (8.3). 

我 们 自然 会 认为 , “在 通常 的 情况 下 ”, "X 的 密度 近乎 是 均匀 的 . 在 1912 年 , 庆 
加 莱 在 牢固 的 极限 定理 的 基础 上 论证 了 这 一 含糊 的 认识 . 我 们 不 重复 这 一 分 析 , 因 
为 类 似 的 结果 容易 从 (8.3) 式 推出 . 当然 , 不 言 而 喻 , 给 定 的 密度 /实际 上 是 展 伸 
到 一 个 长 的 区 间 , 因此 它 的 极 大 值 m 最 小 的 2 为 了 简单 起 见 ,假定 在 a 点 上 了 取 
到 极 大 值 m = f(a), 在 a 之 前 f 增加, 当 z > a 时 减少 . 对 于 缩减 变量 "X 的 密 
度 2, 则 有 


(7) -1=D f(r+n)— / 滋 f(s)ds. (8.4) 


对 固定 的 z, 以 zk 表示 形 如 z 十 n 使 得 a 十 k < zk < a+ 大 十 1 这 样 唯一 的 点 . 于 
是 (8.4) 可 改写 为 


p(z) -1= > “i ro -ras (8.5) 
对 于 上 < 0, 被 积 函数 < 0, 因此 
ee) -1<y to+ 朋 -Jark+I=Ha= 
k=0 


类 似 的 论证 表明 p(z) -1> 一 m. 于 是 lp(z) -11< m, 因此 y 确实 接近 常数 . 
单调 性 条 件 只 是 为 了 说 明 问题 而 加 的 , 它 可 以 用 许多 方法 减弱 .[ 简洁 的 充分 条 
件 可 用 19.5 节 泊 松 求 和 公式 得 出 ] 
@ 对 收 生性 感到 困难 的 读者 只 需 研究 集中 在 有 限 区 问 上 的 密度 f. 如 果 f 对 于 充分 大 的 z 与 -> 是 


单调 的 ， 则 一 致 收敛 是 显然 的 . 没有 对 f 加 任何 条 件 时 , 则 级 数 在 某 些 点 上 可 能 发 散 , 但 ” 恒 表 示 
密度 , 因为 (8.3) 式 中 的 部 分 和 表示 一 个 函数 的 单调 序列 , 其 积分 趋 于 1. 一 一 译 者 注 


外 注意 因 了 受 ”f(s)ds 一 1 的 限 负 一 一 评 者 注 
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例 (c) 第 1 位 有 效 数字 的 分 布 . 一 位 著名 的 应 用 数学 家 极其 成 功 的 工作 , 是 发 现 
在 农历 书 、 人 口 调查 报告 或 类 似 的 摘要 数 表 中 随机 地 选取 个 数 , 第 一 位 有 效 数字 小 
于 5. 我 们 自然 想到 ,所 有 9 个 数字 是 等 可 能 的 , 因此 , 数字 不 大 于 4 的 概率 是 和 
在 实际 上 ? 它 接近 于 0.7 . 

考虑 一 个 赋 于 数字 以 概率 pk = lg(k 十 1) 一 lgk 的 离散 概率 分 布 ( 式 中 lg 表 
示 以 10 为 底 的 对 数 ,k= 1,… ,9). 这 些 概率 的 近似 值 是 

D1 = 0.3010,p2 = 0.1761, ps = 0.1249, ps = 0:0969, ps = 0:0792, pe = 0.0669, p7 = 
0.0580, ps 二 0.0512, pe = 0.0458， 可 见 分 布 {pk} 与 含 权 5 = 0.111.… 的 均匀 分 布 
有 显著 的 差别 . 

我 们 现在 指出 (依照 R. S. Pinkham)，{pk} 是 由 物理 观测 大 基数 据 中 ,随机 选 
出 的 数 的 第 一 个 有 效 数字 的 经 验 分 布 , 这 似乎 是 对 的 . 实际 上 , 可 以 把 它 看 作 是 具 
有 某 个 未 知 分 布 的 随机 变量 了 > 0. 为 使 Y 的 第 一 个 有 效 数 字 等 于 k, 当 且 仅 当 对 
于 某 个 n,10"k < Y < 10"(k 十 1). 对 于 变量 X = 1gY， 这 意味 着 

n+lgk < X <n+lg(k+ 1). (8.6) 

如 果 Y 的 取 值 范围 很 大 , 则 缩减 变量 "X 将 是 近似 于 均匀 分 布 的 , 于 是 (8.6) 式 的 
概率 接近 于 lg(k + 1) 一 lgk = py- 

当 加 法 以 1 为 模 时 , 卷 积 公 式 (1.5) 和 导出 这 公式 的 论证 都 保持 正确 . 相应 地 ， 
长 度 为 1 的 图 上 两 个 密度 的 卷 积 确定 下 列 密度 : 


1 
wa) = { file wf)ay. 人) 
0 
如 果 X1 和 Xs 是 具有 密度 及 和 户 的 独立 变量 则 X + Xs 的 密度 为 w. 因为 这 
些 密度 是 周期 的 ， 所 以 均匀 密度 和 任 一 其 他 密度 的 卷 积 是 均匀 的 (见习 题 16). 
2.9 习 题 


1 证明 , 在 第 1 卷 第 7 章 中 所 建立 的 二 项 分 布 的 正 态 肖 近 音 含 正 态 密度 的 卷 积 公 式 (1.7). 
2 利用 变换 = = 37, 求证 了 (3) = VE 
3， 勒 让 德 (Legendre) 的 倍 重 公式 , 对 于 J 二 v, 由 (2.5) 式 计算 

r(2) = 二 ror(m+ 3): 


@ 对 于 经 验资 料 ， 见 F. Benford, The law of anomalous numbers, Proc. Amer. Philoe. Soc., 
vol.78(1938), pp. 551 一 572. 
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10. 


1 


12. 
13. 


提示 : 在 0<y < 上 利用 变换 4y 一 矿 ) = 


.如果 g(z) = Be, 试 求 卷 积 g* 9 和 g*g*9 以 及 g*. 
. 令 X 和 Y 独立 且 具 有 相同 的 柯 西 密度 mi(z)(4.5)。 试 证 ， 乘积 XY 的 密度 为 


2r-2(z — 1)-!gl. 
提示 : 不 要 求 直 接 计算 ， 只 需 注意 


ET et a 
(T+s)(a+s) 1+s ats. 


. 试 证 : 如 果 


(a) 考虑 上 题 的 变量 In|X| 和 In|Y|; 
(b) 直接 利用 代 换 ex = t 和 分 解 部 分 分 式 .( 见 15.9 节 的 习题 8.) 


4 了 
Nier te 


则 f*f(z)= 


,如 果 X 有 正 态 密度 n, 则 显然 X-? 有 稳定 密度 (4.8). 由 此 证 明 ， 如 果 XX 和 Y 是 独 


立正 态 变量 ， 有 期 望 2 方差 0 及 o3, 则 2 = XY/VXZ 十 Z5 是 正 态 的 ， 其 方差 为 
o3, 满足 去 = 计 + 友 (LShepp). 


df 


， 令 各， …,Xm 是 独立 的 ,XX(n) 是 其 中 最 大 者 . 证 明 : 如 果 Xi 有 


(a) 柯 西 密度 (4.5), 则 
P{n Xn < rz} —e /™), z>0; 
(b) 稳定 密度 (4.8), 则 
Pfn-2Xtw < zs} +e "VI, 2>0. 


. 令 六 和 Y 独立 , 具有 集中 在 而 55 上 的 密度 /和 9. 如 果 E(X) < co, 则 为 使 比 X/Y 


有 有 限期 望 ， 当 且 仅 当 
人 yg(y)dy < oo， 
在 2.5 节 例 (c) 中 ，(a) 如 果 在 时 刻 0 服务 员 空闲 着 ，(b) 在 稳定 状况 下 ， 求 出 直到 下 
次 服务 完成 应 等 待 的 时 间 . 
在 2.5 节 例 (d) 中 , 证 明 


E(Ts) = F(z)(p+1—2)+ 人 f(t + 2)dt, 


其 中 是 下 的 期 望 . 由 此 验证 当 z 是 均匀 分 布 时 关于 E(T) 的 断言 
在 2.5 节 例 (d) 中 , 当 0<t<1 时 , f(t) = 1, 试 求 等 待 时 间 分 布 . 


在 2.6 节 例 (c) 中 , 假设 4 是 由 (4.2) 给 出 的 6 密度 . 试用 二 项 系数 求 条 件 概率 (6.3) 
的 值 . 
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14. 令 X 和 了 独立 , 相同 的 泊 松 分 布 为 P{X = 对 一 et"/", 证 明 
P{X—Y=r}=e*1(2t), r=0,+1,+2... 


( 见 5.1 节 习 题 9.) 

15. 2.7 节 (c) 的 诸 结果 对 于 非 对 称 随机 游 动 仍然 正确 ， 只 要 首次 通过 > > 0 的 概率 等 于 
1, 即 只 要 p > q. 证 明 : 在 (7.11) 式 中 的 唯一 变化 是 把 2-”"+" 换 为 p"g""， 并 且 对 
于 p> 497r=1,2,.…, 

VB/Dre TI-(2VP) 

确定 了 集中 在 t > 0 上 的 概率 密度 . 

16. 令 久 和 YY 独立 , "X 和?Y 是 以 1 为 模 缩减 的 变量 . 证 明 : "X +"Y 是 把 X 十 Y 按 模 
为 1 缩减 而 得 到 的 . 用 直接 计算 来 验证 相应 的 卷 积 公式 . 
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由 于 明显 的 原因 , 多 元 分 布 比 一 元 分 布 更 不 经 常 出 现 , 而 且 本 章 的 素材 在 后 面 
各 章 中 很 少 用 到 . 然而 ,多 元 分 布 却 包含 了 许多 重要 的 素材 , 例如 正 态 分 布 的 重要 
特性 和 在 随机 过 程 理论 中 所 用 到 的 一 些 工 具 ， 当 把 它们 同 与 其 有 关 的 复杂 问题 区 
分 时 , 我 们 就 能 更 好 地 理解 它们 的 本 质 . 


3.1 密 度 


为 了 印刷 上 的 简便 ,我 们 在 笛 卡 儿 平面 R* 上 讨论 , 但 显然 维 数 不 是 本 质 的 . 
我 们 把 平面 看 作 是 具有 坐标 变量 Xi, X2 的 确定 坐标 系 (更 为 方便 的 单个 字母 的 记 
法 将 在 3.5 节 中 引入 ). 
定义 在 R? 上 且 积分 等 于 1 的 非 负 可 积 函 数 f 称 为 概率 密度 ,或 者 简称 为 密 
度 (本 章 出 现 的 所 有 密度 都 是 分 段 连续 的 , 因此 积分 的 概念 不 要 求 说 明 ). 密度 f 赋 
予 区 域 Q 以 概率 
P{Q} = | f(z1,72)dr1dz2. (1.1) 
1 


当然 , 为 使 积分 存在 , 假定 2 是 充分 规则 的 . 所 有 这 样 的 概率 都 由 平行 于 坐标 轴 的 
和 矩形 的 概率 ， 即 由 下 式 唯一 确定 ， 


by pba 
P{ai < Xi < bi,a2 < X2 < ba} -/ / f(z1, zz)dzidz2， (1.2) 
其 中 au < bi 是 任意 实数 . 令 ai = aa = 一 00, 我 们 得 到 f 的 分 布 函 数 F, 即 
F(z1,72)=P{X1 < T1, X2 < 72}. (1.3) 


显然 , 下 (bi,z2) 一 F(a1,z2) 是 宽度 为 b 一 ai 的 半 有 限 带 形 的 概率 , 并 且 在 (1.2) 式 
中 出 现 的 撼 形 是 两 个 这 样 的 带 形 之 差 , 概率 (1.2) 等 于 所 谓 的 混合 差 


Flb1,b2) — F(a1,b2) 一 下 (btaz) — F(a1, a2). 


由 此 可 知 , 分 布 函 数 FF 唯一 地 确定 了 所 有 的 概率 (1.1). 不 管 与 直线 的 情形 形式 上 
如 何 类 似 ， 分 布 函数 FF 的 概念 在 平面 上 比较 少 用 , 而且 最 好 都 用 密度 本 身 确定 概 
率 (1.1). 这 种 确定 概率 的 方式 在 两 方面 与 两 个 离散 随机 变量 的 联合 概率 分 布 (第 1 


3.1 密 度 59 


卷 9.1 节 ) 不 同 . 首先 ,积分 代替 了 求 和 ; 其 次 , 在 这 里 概率 只 赋予 “充分 规则 的 区 
域 ”, 然而 在 离散 样本 空间 中 , 所 有 的 集合 都 有 概率 . 因为 本 章 仅 讨论 差别 不 其 明显 
的 简单 例子 , 所 以 离散 理论 的 概念 和 术语 可 以 不 言 自明 的 方式 照搬 过 来 . 因此 ， 和 
上 一 章 一 样 , 我 们 使 用 概率 论语 言 ,而 不 对 一 般 理论 作 任何 讨论 (一 般 理论 将 在 第 
5 章 中 给 出 ). 

由 (1.3) 式 显而易见 , 


P{X1 < 71} = F(z1,00). (L4) 
因此 ,及 (z) = F(z,o0) 确定 了 Xi 的 分 布 函数 , 它 的 密度 有 为 
Ha= tea (5) 


当 需 要 强调 Xi 与 对 偶 (X1, X2) 之 间 的 联系 时 , 我 们 又 把 五 说 成 是 边缘 分 布 ， 用 
说 成 是 边缘 密度 . 
X1 的 期 望 jn 与 方差 7( 如 果 它 们 存在 ) 是 


m=B0)= {afte rn)ande (1.6) 


十 oo oo 
oo? = Var(X1)= / 广 (zl — p13) f(z1, rz)dzidz2. (1.7) 


由 对 称 性 ,这 些 定义 也 适用 于 Xs. 最 后 ,Xt 和 Xs 的 协 方差 是 
十 oo ptoo 
CorCes x)= 人 /emaea-majfehmajdzadza (1.8) 


正规 化 变量 Xici : 是 无 单位 量 , 它们 的 协 方差 即 p = Cov(Xi,X2)o71031 是 Xi 和 
Xz 的 相关 系数 ( 见 第 工 卷 9.8 节 ). 

随机 变量 U 是 坐标 变量 Xl 和 Xz 的 函数 , 而 且 我 们 暂时 只 考虑 概率 P{U 和 二 
可 以 用 形 如 (1.1) 的 积分 来 计算 的 那些 函数 . 因此 , 每 一 个 随机 变量 将 有 唯一 的 分 
布 函数 ,而 且 每 一 对 随机 变量 有 一 个 联合 分 布 ， 等 等 . 

在 许多 情况 下 , 变换 坐标 变量 是 方便 的 , 即 令 两 个 变量 六 ,Y2 起 着 原先 X1, X2 
所 起 的 作用 . 在 最 简单 的 情况 下 , Y; 定义 为 线性 变换 ， 


和 = al 到 十 al222， X2= a 十 az222， {1.9) 


@ 这 里 和 以 后 当 z 一 co 时, U(oo) = limU(z), 符号 U(o0) 的 利用 蕴含 着 极限 的 存在 . 
@ 在 坐标 轴 上 的 投影 是 另 一 种 可 接受 的 术语 
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它 的 行列 式 A = allaza - a12421 > 0. 一 般 说 来 , 形 如 (1.9) 的 变换 , 或 者 可 以 描述 
为 从 一 个 平面 到 另 一 个 平面 的 映射 , 或 者 描述 为 在 同一 平面 上 的 坐标 变换 . 把 变换 
(1.9) 代入 积分 (1.1), 我 们 得 到 


P{2}= / / f(aniy + a12y2, a21Y1 + a22Y2) - 4dyidy2， (1.10) 
EE 
区 域 89, 由 所 有 这 样 的 点 (y1,y2) 组 成 , 它 的 像 (zi, zz) 在 2 中 . 因为 事件 (X1, X2) e 
和 (Yi,Y2) e 02, 是 相等 的 , 可见 (区 ,了 ) 的 联合 密度 由 下 式 给 出 ; 
gly1,y2) = f(any + a12y2, 021Y1 + a22Yy2) * A. (1.11) 


所 有 这 些 都 同样 适用 于 高 维 情形 . 
除了 行列 式 4 换 成 雅 可 比 (Jacobi) 行列 式 以 外 , 类 似 的 论证 适用 于 更 一 般 的 
变换 , 我 们 将 只 明显 地 利用 极 坐标 变换 


X1= Recos6，Xo = Rsin 6， (1.12) 
其 中 (R, 6) 局 限于 甩 > 0, -x < 6 < 这 里 (R 6) 的 密度 由 下 式 给 出 ， 
g(r,0) = f(r cosO, rsinO)r. (1.13) 
在 三 维 的 情形 中 , 我们 利用 地 再 经 度 2 和 纬度 9( 其 中 -x<w< x 和 -3x<0< 
): 于 是 在 极 坐 标 中 , 坐标 变 其 定义 为 
Xi1=ReosBeosO, Xs= Rsin 6cos 96， Xs= Rsin 6. (1.14) 
对 于 它们 的 联合 密度 ,我 们 有 
g(r, 9,0) = f(rcosp cosb,rsinp cosb, rsinO)r? cosb. (1.15) 


在 变换 (1.14) 中 ,“ 平 面 " 6 = -3 和 6 一 3 相应 于 za 方向 上 的 半 轴 ,但 是 这 个 
特点 不 起 作用 ,因为 这 些 半 轴 有 零 概率 . 类 似 的 陈述 适用 于 平面 极 坐标 系 的 原点 . 
例 (a) ”独立 的 变量 在 上 一 章 中 ,我们 考虑 了 具有 和 密度 及 和 户 的 独立 变量 Xl 和 
Xa. 这 相当 于 以 f(z1, za) = 户 (zi) 户 (za) 来 定义 二 元 密度 ,所 表示 边缘 密度 . 

例 (b) “随机 选 点 " 令 工 是 一 个 有 界 区 域 ; 为 了 简单 起 见 , 我 们 假设 是 凸 的 . 
以 7 表示 了 的 面积 , 设 f 在 内 等 于 -1, 在 外 等 于 0. 于 是 了 是 一 个 密度 ， 
任 一 区 域 9 cT 的 概率 等 于 0 与 的 面积 之 比 . 显然 ,类似 于 一 维 的 情形 , 我 们 
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说 对 偶 (Xi1, X2) 在 卫 上 是 均匀 分 布 的 . 用 直观 的 语言 来 说 ,Xi 在 横 坐 标 z1 上 的 

边缘 密度 等 于 本 在 rz: 上 的 宽度 . (见习 题 1.) 

例 (c) 球面 上 的 均匀 分 布 . 在 三 维 空间 中 , 单位 球面 号 可 用 地 理 经 度 p 和 纬度 
.8 由 下 列 方程 表示 : 


Z1 一 cospcosb，z2 一 sinpcosb， xz3 一 sinb. (1.16) 


满足 -x < w 和 元 -3 < 9 < 3 的 每 一 对 侦 (p,0), 恰 对 应 于 球面 上 一 点 ,并且 
除了 两 个 极点 外 , 荆 上 的 每 个 点 都 可 以 这 样 得 到 . 两 极点 的 特殊 作用 不 需要 我 们 关 
心 , 因为 它们 的 概率 为 0. 球面 上 的 区 域 2 由 它 在 wm8 平面 上 的 像 确定 , 2 的 面积 
等 于 cos9dpd6 在 这 个 像 上 的 积分 [ 见 (1.15)]. 对 于 “在 上 上 的 点 随机 选取 ”这 一 
理想 试验 , 我 们 将 令 4xP{2} = 8 的 面积 . 这 等 价 于 在 0 平面 上 定义 密度 


a 1 
gp,0) = { (dn)-lcos6,， 对 一 xn<yp<n, |0< 3 Ga7) 


0， 对 其 他 值 . 


按照 这 样 的 定义 ,坐标 变量 是 独立 的 ,经 度 在 二 元 元 上 是 均匀 分 布 的 . 
把 球面 看 作 p 一 9 平面 的 方法 ,在 地 图 上 常用 , 而 且 对 概率 论 是 有 用 的 . 但 是 
要 注意 ,坐标 变 基 是 很 任意 的 ， 它 们 的 期 望 与 方差 对 于 原先 的 理想 实验 毫 无 意义 . 
例 (d) ”二 维 正 态 密度 , 高 维 正 态 密度 将 在 3.6 节 系 统 地 引入 . 先 考虑 二 维 情形 , 因 
为 它 提供 了 容易 得 出 这 个 分 布 的 方法 . 与 2.2 节 , (2.1) 的 正 态 密度 7 相 类 似 的 是 形 
如 C.erezxza) 的 密度 , 其 中 g(zi, zz) = az 十 2bzizaz 十 aaz3. 容易 看 出 , 为 使 e 
是 可 积 的 , 当 且 仅 当 o 是正 的 , 并 且 a1as 一 刀 > 0. 从 概率 论 的 意义 来 看 , 用 它 的 
， 方 差 来 表示 系数 a; 和 b, 并 且 定义 以 原点 为 中 心 的 以 下 二 维 正 态 密度 会 更 好 一 些 ; 


1 1 好 ZlT2 号)] 
= 一 一 2 十 1.18 
ven) = ro A em| 二 (号 -2p2 天 + 号 | ， (39 


其 中 ol > 0,02 > 0,-1< p < 1. 关于 z2 的 积分 容易 通过 代 换 t = zz/oa - pri/an 

来 进行 (完成 平方 ), 由 此 可 见 2 确实 表示 R? 上 的 密度 . 此 外 , 很 明显 ,Xl 和 X2 

的 边缘 分 布 也 是 正 态 的 ?, 且 E(Xi) = 0 Var(Xi) = 0?,Cov(X1,X2) = poaco. 换 句 

话说 , p 是 XI 和 Xo 的 相关 系数 . 在 (1.18) 式 中 把 mi 换 为 zi 一 ca， 就 得 到 以 点 

(cu cz) 为 中 心 的 正 态 密度 . 

。。“@ 与 通常 的 看 法 相反 , 存在 非 正 态 二 维 密度 , 它 具 有 正 态 边缘 密度 (在 习题 2 和 习题 3 中 令 述 两 种 类 
型, 在 5.12 节 的 习题 5 和 习题 7 中 再 叙述 丙种 类 型 ). 在 希望 处 理 正 态 密度 时 ,统计 学 家 们 有 时 引 


入 一 对 新 的 正 态 分 布 的 坐标 变量 Yi = g1(X1), Y2 = 92(X2). 但 是 这 也 不 能 使 (Yi,Y2) 的 联合 
分 布 是 正 态 的 . 
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重要 的 是 ， 线 性 变换 (1.9) 把 一 个 正 态 分 布 变 成 另 一 正 态 分 布 ， 这 从 定义 和 
(1.11) 式 来 看 是 显然 的 [在 3.2 节 例 (a) 中 继续 讨论 ]. 
例 (e) R? 中 的 对 称 柯 西 分 布 . 令 
1 


1 
2x Vl+2I T+) 


au(zly 22) = (1.19) 


为 了 看 出 这 是 一 个 密度 , 注意 ? 
+o0 a 
三 uz1,Y)dy = 到 a Vi 本 -= 


x 1+2 (1.20) 


由 此 推出 , u 是 密度 且 Xi 的 边缘 密度 是 2.4 节 (4.5) 的 柯 西 密度 m1. 显然 Xi 没有 
期 望 ， 

化 为 极 坐标 后 [如 (1.12)]，R 具有 与 8 无 关 的 密度 ， 因 此 变量 R 和 6 是 
随机 独立 的 . 因此 利用 1.10 节 中 的 术语 ， 我 们 可 以 说 ， 对 于 对 称 柯 西 分 布 的 变 
量 ，(X1, Xz) 表示 一 个 随机 选择 方向 的 向 量 ,向 量 的 长 为 R, 忆 的 密度 为 rV(I 二 72)-3， 
由 此 

P{R<7}=1- V+r)™. 
[在 .3.2 节 例 (c) 中 继续 讨论 |] 
例 (f) RS3 中 的 对 称 柯 西 分 布 , 令 


1 1 
vb zza) = TT 


(1.21) 
容易 看 出 ，(X1,X2) 的 边缘 密度 是 (1.19) 的 对 称 柯 西 密度 4. 因此 ,X; i 
度 是 柯 西 密度 i( 在 习题 5 中 继续 讨论 ). 

应 该 提 到 ,我 们 可 以 像 一 维 情形 那样 定义 卷 积 ， 虽 拓 以 后 它 不 起 显著 的 作用 
考虑 两 个 分 别 具 有 联合 密度 f 和 9 的 对 偶 (Xi1,X2) 和 (Yi, 区 )，、 两 个 对 偶 是 独 
立 的 ,是 指 我 们 取 含有 坐标 变量 Xi, X2,Yi,Y2 的 四 维 空间 作为 样本 空间 ， 并 在 其 
中 定义 一 个 由 乘积 f(z1, z2)g(y1, 如 ) 给 出 的 密度 . 如 同 Ri 中 一 样 ， 容 易 看 出 ， 和 
(6 + 2 X2 十 歼 ) 的 联合 密度 " 由 下 列 卷 积 公式 给 出 ， 


+o0 ptoo 
v(z21,22) = / f(z1 — Z1,22 — T2)9(T1, T2)dz1dr2, (1.22) 
-oo -= 


它 显然 类 似 于 1.2 节 (2.12)( 见 习题 15 ~ 习题 17). 
@ 为 便于 计算 , 作 变换 y= 1+z9tant. 


@ 利用 代 换 z= VI 十 zi 十 ztant 
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3.2 条 件 分 布 


假定 对 偶 (Xi,X2) 有 连续 密度 f,Xi 的 边缘 密度 f 是 严格 正 的 . 研究 在 给 定 
€<X1<&+h 下 事件 X2 和 7 的 条 件 概率 , 即 


€+h 人 
as "fleway 
P{X2 < ME <X1 < E+h}= Eo— QD) 
/ fi(z)dr 
€ 
把 分 子 和 分 母 同 除 以 h, 我 们 看 出 ， 本 h 一 0 时, 右边 趋 于 
Ueln) = 三 高 /[ JE,y)dy. (2.2) 
对 于 固定 的 &, 这 是 9 的 一 个 分 布 函数 , 它 的 密度 为 
uk(7) = 三 pail nD). (2.3) 


我 们 称 w 为 在 给 定 Xi = 下 X2 的 条 件 密度 . 在 给 定 Xi = 下 X2 的 条 件 期 望 
定义 为 


1 +o0 
Bo = 0 = 6 ve way, (2.4) 


只 要 积分 绝对 收敛. 如 果 把 5 看 作 是 变量 , 那么 右边 变 成 它 的 函数 . 特别 , 我们 可 
以 把 5 和 坐标 变量 X 等 同 起 来 , 就 得 到 一 个 随机 变量 ， 称 为 X2 在 Xi 上 的 回归 ， 
用 E(X2|X1) 表示 . X 的 出 现 并 不 掩盖 下 列 事实 ; 这 个 随机 变量 是 单个 变量 Xi 的 
函数 [ 它 的 值 由 (2.4) 式 给 出 ]. 

迄今 我 们 假设 , 对 于 所 有 的 &, 扩 (€) > 0. (2.4) 式 对 于 使 及 (&) = 0 的 任何 点 都 
是 无 意义 的 , 但 是 这 样 的 点 的 集合 的 概率 为 0, 我 们 约定 在 使 广 为 0 的 所 有 点 上 
(2.4) 式 为 0. 因此 ， 当 密度 连续 时 , E(X2|Xi) 是 确定 的 (在 5.9 节 ~5.11 节 中 将 对 
任意 的 分 布 引 进 条 件 概率 )- 

无 疑 ，X1 在 X2 上 的 回归 E(X1)X2) 可 同样 地 定义 . 此 外 ,条 件 方差 Var(X2|X1) 
用 与 (2.4) 式 完全 类 似 的 公式 定义 . 

这 些 定义 可 以 扩展 到 高 维 中 去 , 除了 Rs3 中 的 密度 产生 3 个 二 元 与 3 个 一 元 
条 件 概率 以 外 (见习 题 6). 
例 (a) 正 态 密度 . 对 于 密度 (1.18), 显然 有 


(y ~ p(02l01)€)? | 


us(y) = RE 20 e203 (2.5) 
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这 是 一 个 具有 期 望 p(c2/01)é 与 方差 (1 一 p?)o3 的 正 态 密度 . 于 是 
E(X2|X1) = p(02/o) Xi, Var(X2olX1) = (1 一 p2)o3. (2.6) 


正 态 分 布 的 令 人 满意 的 性 质 之 一 就 是 回归 为 线性 函数 . 

这 些 关系 式 的 最 早 应 用 也 许 应 归于 高 尔 顿 (Galton), 他 的 例子 中 的 一 个 可 以 说 
明 它们 的 经 验 意义 . 设想 Xi 和 X2 表示 人 类 总 体 中 父亲 和 儿子 的 高 度 (以 英寸 为 
单位 , 在 测量 中 减 去 各 自 的 期 望 ). 于 是 , 随机 选 出 的 一 个 儿子 的 高 度 是 期 望 为 0、 
方差 为 o3 的 正 态 变 量 . 但 是 , 在 父亲 有 固定 高 度 & 的 儿子 的 子 总 体 中 ,儿子 们 的 
高 度 是 期 望 为 p(02/01)§、 方差 为 3(1 一 p2) < 03 的 正 态 变量 . 因此 , Xo 在 X 上 
的 回归 表明 , 在 X1 的 观察 值 中 包含 着 多 少 关于 X2 的 统计 信息 . 
例 (b) 令 XX 和 X2 是 独立 的 , 且 在 本 I 内 均匀 分 布 , 以 Xa) 表示 它们 之 中 最 小 
者 , X(z2) 表示 其 中 最 大 者 . 对 偶 (X(1),X(2)) 的 密度 在 三 角形 0 < zi < za < 1 内 等 
于 常数 2, 在 其 他 地 方 为 0. 对 za 的 积分 表明 X() 的 边缘 密度 为 2(1 - zl). 因此 ， 
在 给 定 X(1) = zl 下 , X(2) 的 条 件 密度 在 区 间 zi,1 内 等 于 常数 1/1 一 z1, 在 其 他 地 
方 等 于 0. 换 句 话说 , 给 定 了 Xi 的 一 个 值 ,变量 X(2) 在 z1,T 上 是 均匀 分 布 的 
例 (c) R? 中 的 柯 西 分 布 . 对 于 二 维 密度 (1.19), Xi 的 边缘 密度 在 (1.20) 式 中 给 
出 . 因此 , 在 给 定 Xi 下 X 的 条 件 密度 是 


1 十 6 


1 
uely) = 3° Ve (2.7) 


注意 , ue 与 密度 uo(y) 仅 差 一 个 尺度 因子 Vi 十 名. 因此 , 所 有 的 密度 we 属 同一 a 
型 . 在 这 个 例子 中 , 条 件 期 望 不 存在 (见习 题 6). 
按照 条 件 密度 (2.3), X2 的 分 布 函 数 取 下 列 形式 : 


a 
Pex < = fe) laean. (2.8) 


换 句 话说 , X2 的 分 布 是 由 在 条 件 密 度 ue 中 对 参数 & 的 随机 化 而 得 到 的 . 因此 ,每 
一 分 布 9 都 可 以 表示 为 混合 分 布 . 尽管 在 理论 上 这 是 很 有 普遍 性 的 , 但 是 强调 各 有 
不 同 . 在 某 些 情形 [如 例 (a)], 我 们 由 (X1, Xz) 的 二 元 分 布 开始 , 导出 条 件 分 布 , 然 
而 在 实际 的 随机 化 中 , 条 件 概率 uz 是 最 初 的 概念 , 而 密度 f(z,y) 实际 上 被 定义 为 
auz( 幼 户 (z)( 这 种 用 条 件 概率 来 定义 概率 的 方式 已 在 第 1 卷 5.2 节 中 用 初等 方法 说 明 
过 )- 


@ 迄今 我 们 只 考虑 了 连续 密度 ,而 一 般 情形 将 包含 在 5.9 节 中 . 随机 化 概念 曾 在 2.5 节 中 讨论 过 . 
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3.3 ”再 论 指数 分 布 和 均匀 分 布 


本 节 的 目的 是 为 上 节 提 供 说 明 性 的 例子 , 同时 补充 第 1 章 的 理论 . 
例 (a) ”指数 分 布 的 一 个 特性 . 令 X! 和 X2 是 两 个 具有 密度 户 和 户 的 独立 随机 
变量 , 以 9 表示 它们 的 和 5 = Xi + Xz 的 密度 . 对 偶 (X1,5) 和 (Xi, X2) 以 行列 式 
为 1 的 线性 变换 Xi = Xi, X2 = 5 一 Xi 相互 联系 , 由 (1.11) 式 , 对 偶 (Xi1, 5) 的 联 
合 密度 由 户 (z) 户 (s 一 z) 给 出 . 对 所 有 z 积分 , 我 们 得 到 5 的 边缘 密度 g. 在 给 定 
9 三 8 下, X1 的 条 件 密度 us 满足 


f(z)fa(s— 7) 


us(z) = gs) 


(3.1) 

在 指数 密度 的 特殊 情形 户 (z) = fo(z) = 2e-*? 下 (其 中 xz > 0), 我 们 得 到 : 对 
于 0<z < stus(z) = 5-1. 换 句 话 说 , 给 定 Xi + Xa = s, 变量 Xi 在 区 间 而 5 内 是 
均匀 分 布 的 . 直观 而 言 ,8 = s 的 知识 并 没有 给 我 们 提示 随机 点 X1 在 区 间 0,s 内 的 
可 能 位 置 . 这 个 结果 与 指数 分 布 中 固有 的 完全 随机 性 的 概念 是 一 致 的 (一 种 更 强 的 
形式 包含 在 例 (d) 中 . 参见 习题 12). 
例 (b) 区间 的 随机 划分 . 令 X1,…,Xn 是 在 (一 维 ) 区 间 0,1 内 独立 且 随 机 地 
选取 的 n 个 点 ， 如 前 所 述 ， 我 们 以 Xo),Xco，…Xo 表示 按 增加 的 顺序 重新 排 
列 的 随机 点 X1,…,Xn， 这些 点 把 区 间 I 分 成 n 十 1 个 子 空间 ,将 它们 从 左 向 
右 编号 表示 为 ,了 2,…,In+1， 因 此 Xj) 是 石 的 右 端点 . 我 们 的 第 一 目的 是 计算 
(X0，…Xeoo) 的 联合 密度 . 

相应 于 (Xi,…, Xn) 的 样本 空间 是 以 0 < zk < 1 定义 的 n 维 超 正 方 体 F,， 概 
率 等 于 n 维 体积 . 以 X(i) 为 坐标 变 基 的 自然 样本 空间 是 工 的 子 集 Q， 它 包含 所 有 
这 样 的 点 : 


0<z1&:<zrn<l1, 


的 体积 是 1/nl. 显然 , 超 正方 体 工 包 含 nl! 个 集合 2 的 全 等 仿 样 . 在 每 个 仿 样 中 ， 
有 序 的 n 元 组 (X(),…，X(n)) 与 Xi,… ,Xn 的 一 个 固定 排列 一 致 (特别 , 在 工 内 
部 , XU = Xk). 对 于 某 一 对 偶 j 关头 ,X; = Xi 的 概率 等 于 0, 并 且 只 有 这 个 事件 在 
不 同 的 仿 样 之 间 引 起 相交 . 由 此 推出 , 对 于 任 一 子 集合 4 C 8, (XG),…,X(n)) 位 
于 4 中 的 概率 等 于 (X1,… ,Xn) 位 于 nl! 个 4 的 仿 样 之 一 中 的 概率 , 它 也 等 于 4 
的 体积 的 n! 倍 . 因此 , P{(X(1),…,X(n)) < A} 等 于 4 的 体积 与 2 的 体积 比 , 它 表 
示 m 元 组 (X(1),"…,X(n)) 在 集合 2 上 是 均匀 分 布 的 . 我 们 的 n 元 数组 的 联合 密度 
在 2 内 等 于 n!, 而 在 其 他 地 方 等 于 0. 
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由 (Xi,…,Xn) 的 联合 密度 , 保持 Xk 固定 而 对 其 余 的 变量 进行 积分 , 可 以 计 
算 Xn 的 密度 . 容易 看 出 ,此 结果 与 在 1.7 节 (7.2) 式 中 用 其 他 方法 计算 得 出 的 密 
度 一 致 . 

这 个 例子 作为 讨论 和 计算 多 元 密度 的 练习 , 已 被 详细 论述 过 . 
例 (c) 长度 的 分 布 . 在 上 例 的 随机 划分 中 , 以 Ui 表示 第 k 个 区 间 I 的 长 度 , 则 


Ui = XU = Xk) — Xk1), k=2,3,..,n. (3.2) 


这 是 一 个 行列 式 为 1 的 形 如 (1.9) 的 线性 变换 . 点 0 < zi < … < zn < 1 的 集合 0 
被 映 入 点 wj > 0, ui 十 … 十 un < 1 的 集合 2*, 因此 (Di ,Un) 在 这 个 区 域内 是 均 
匀 分 布 的 . 这 个 结果 比 以 前 建立 的 Ui 有 相同 的 分 布 函数 要 强 (1.7 节 例 (b) 和 1.13 
节 中 的 习题 ,). 

例 (d) ”指数 分 布 随机 性 的 进一步 讨论 . 令 义 1,…,Xn+1 是 具有 相同 密度 ae-o*(z> 
0) 的 独立 变量 ， 令 5; = Xi 十 … 十 Xj, 则 利用 形 如 (1.9) 式 的 行列 式 为 1 的 线 
性 变换 ， 由 (Xi,…, Xnt1) 可 得 (31,52,…,Sn+1) 以 0 表示 点 z; > 0 的 “ 填 
限 ”(octant)(X1,…, Xn+1) 的 密度 集中 在 2 上 , 并 由 下 式 给 出 : 


antle-a(z1+ "+zun), zj > 0. 


变量 51,…,5nt1 把 2 映 到 由 0 < si < sz < … < sn+l < oo 确定 的 区 域 2* 内 ， 
并 且 见 (1.11) 式 ] 在 2* 内 (51,…,Snt1) 的 密度 为 amtle-esmti, 已 知 Sn+1 的 边 
缘 密度 是 工 密度 a"+1S"e-“*/ml， 因此 在 给 定 Sn+1 = s 下 mn 元 组 (S1,.……,Sn) 的 条 
件 害 度 ， 当 0 < s1 <… < sn < s 时 等 于 nls-"( 其 他 地 方 等 于 0). 换 句 话说 , 给 定 
Sn+1 = 8 变量 (51,… ,5%) 在 它们 的 可 能 区 域 上 是 均匀 分 布 的 . 把 这 与 例 (b) 比较 ， 
我 们 可 以 说 , 给 定 Sn+1 = s, 变量 (S1,… ,Sn) 表示 在 区 间 机 5 内 随机 独立 地 选 出 
并 按 其 自然 顺序 从 左 到 右 编号 的 n 个 点 . 

例 (e) 与 指数 分 布 有 关 的 另 一 分 布 . 为 了 特殊 的 应 用 , 我 们 给 出 变换 的 进一步 的 
例子 . 再 令 X1,… ,Xn 是 具有 相同 指数 分 布 的 独立 变量 , 且 Sn = Xi 十 … 十 Xn. 考 
虑 由 下 式 定义 的 变量 芒 ，… ,Un: 


Us =Xk/Sn， 当 k=1,…,n—1 时, (3.3) 
Un = Sn, 
或 者 等 价 地 考虑 
Xk =UkUn， 当 k<n 时, (3.4) 


Xn = Un(l— 0 Un 1). 
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(3.4) 式 的 雅 可 比 行列 式 等 于 U1. (X1,… ,Xn) 的 联合 密度 集中 在 zk > 0 确定 的 
区 域 2 上 , 并 且 在 此 区 域 上 , 密度 为 are-*(++…+sm). 由 此 推出 , 在 由 


2 十 … 十 Uni<1 ue>0 k=1,.,n 


所 确定 的 区 域 2* 上 ，( 上 ri，……,Zm) 的 联合 密度 为 an eew ,而 在 2* 外 为 0. 关 
于 un 进行 积分 表明 ，(1,…,Un-1) 的 联合 密度 在 2* 上 等 于 (n - 1 在 其 他 地 
方 等 于 0. 与 例 (c) 比较 , 我 们 看 出 , (U1,…, Us-1) 的 联合 分 布 与 用 n 一 1 个 点 随机 
划分 0,I 得 出 的 第 不 个 区 间 的 长 度 的 分 布 一 样 

例 (f) 周期 分 析 中 的 显著 性 检验 与 禾 盖 定理 . 在 实践 中 , 时 间 上 的 任 一 连续 函数 
都 可 以 用 三 角 多 项 式 逼 近 . 如 果 此 函数 是 随机 过 程 的 样本 函数 , 那么 系数 变 成 随机 
变量 , 逼近 的 多 项 式 可 以 写成 形式 


DO Xv coswut + Ysinwt) = 》 Rscos(wot — $,), (3.5) 
v=1 v=1 

其 中 局 = X22 十 Y2,tan 8B = YW/Xw. 反之 , 对 于 随机 变量 X,,Y 的 合理 假设 将 导 
致 一 个 具有 样本 函数 (3.5) 的 随机 过 程 . 一 个 时 期 流行 的 是 , 引入 这 种 形式 的 模型 
并 检验 太阳 黑子 、 小 麦 价格 、 诗 歌 创 作 等 的 “隐蔽 周期 性 ”. 这 种 隐蔽 周期 性 早 在 
中 世纪 时 期 就 已 发 现 , 但 是 甚至 坚强 的 信念 也 需要 用 统计 检验 去 加 以 巩 面 . 此 方法 
大 体 上 可 叙述 如 下 : 具有 适当 选择 的 频率 wi,… ,wn 的 形 如 (3.5) 式 的 三 角 多 项 式 
适合 于 某 些 观测 数据 ， 且 最 大 的 振幅 R, 也 被 观测 到 . 我 们 想 要 证 明 ,这 不 能 归 因 
于 偶然 事件 ,因此 w 是 一 个 真实 周期 . 为 了 检验 这 一 猜想 , 我 们 问 , 无论 哪 一 个 
RR, 的 大 的 观测 值 是 否 都 不 与 “所 有 n 个 分 量 起 相同 作用 ”的 假设 发 生 矛 盾 . 为 了 
检验 , 我 们 相应 地 假设 ,系数 X1,…, Yi 是 具有 期 望 0 与 方差 o? 的 相同 正 态 分 布 
的 相互 独立 变量 . 在 这 种 情形 ( 见 2.3 节 ) 下 ，R? 是 相互 独立 的 ， 具 有 期 望 20? 的 
相同 指数 分 布 . 如 果 观 测 值 Re“ 显著 地 ”偏离 这 个 预测 的 期 望 值 , 通常 会 匆匆 作出 
结论 : 相等 权重 的 假设 是 站 不 住 脚 的 ， R, 表示 了 “隐蔽 周期 性 ”. 

这 一 推理 的 错误 是 R. A. 费 希 尔 (Fisher)(1929) 发 现 的 . 他 指出 : 个 独立 观测 
值 的 最 大 值 , 并 不 服从 每 个 变量 分 别 取 出 时 的 同一 概率 分 布 . 处 理 统计 学 上 最 坏 情 
况 所 得 的 误差 如果 它 是 随机 地 选取 的 ) 在 医学 统计 中 仍 是 很 通常 的 , 但 是 在 这 里 
讨论 这 个 问题 的 理由 却 是 出 人 意外 的 ， 并 且 它 有 趣 地 联系 着 费 希 尔 的 显著 性 检验 
与 覆盖 定理 . 

正如 仅 考虑 各 个 分 量 比 是 有 意义 的 一 样 ， 为 使 系数 正规 化 , 我们 令 

R?2 


= 耳 和 并 了 一 了 (3.6) 
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因为 本 具有 相同 的 指数 分 布 ， 所 以 我 们 可 以 利用 上 例 ( 令 X; = 瑟 ). 于 是 页 = 
Us ,Wa 二 Uni, 但 是 克 =1- 责 -一 到- 因此 , n 元 组 (Vi,…,Vh) 的 
分 布 , 可 作为 n 一 1 个 随机 分 布 的 点 划分 区 间 ,I 得 到 的 n 个 区 间 长 度 的 分 布 . 因 
此 ,所 有 的 Vi 小 于 a 的 概率 ,由 1.9 节 (9.9) 禾 盖 定理 的 公式 给 出 . 这 个 结果 说 明 
了 表面 上 没有 联系 的 问题 之 间 会 出 现 意外 的 关系 .9 > 


*3.4 ” 正 态 分 布 的 特征 
考虑 坐标 变 基 的 非 退 化 线性 变换 
六 = allXi +al2X2， Y= a2lXi +az2X2， (4.1) 


并 假定 (不 失 一 般 性 ) 行列 式 A = 1. 如 果 X1 和 X2 是 具有 方差 02 与 o2 的 独立 正 
态 变量 , 那么 对 偶 (Yi,Yz) 的 分 布 是 正 态 的 , 且 具 有 协 方差 


2 
a1102102 + a1202202 


网 3.1 节 例 (d)]. 在 这 种 情形 下 , 存在 着 系数 ojx 的 非 平凡 选择 , 使 得 Yi 和 二 是 
独立 的 . 下列 定 理 表明 ,， 任 何其 他 的 分 布 都 不 具有 一 维 正 态 分 布 的 这 个 性 质 , 这 里 
我 们 只 对 具有 连续 密度 的 分 布 来 证 明 ， 在 这 种 情形 下 ， 它 化 为 一 个 关于 函数 方程 
(4.3) 的 引 理 . 通过 利用 特征 函数 ， 最 一 般 的 情形 可 化 为 同一 方程 . 因此 , 我 们 的 证 
明 实 际 上 在 最 大 的 一 般 性 上 得 到 了 这 个 定理 ( 见 15.8 节 ). 密度 的 初等 论述 较 好 地 
显示 出 定理 的 根据 . 

仅 当 没有 一 个 系数 aj 为 0 时 , 变换 (4.1) 才 有 意义 . 实际 上 , 例如 假定 ll = 0. 
不 失 一 般 性 , 我 们 可 以 这 样 选取 尺度 参数 , 使 得 a12 = 1. 那么 , 页 = Yo. 只 要 看 一 
看 (4, 多, 就 知道 在 这 种 情形 下 , Y2 和 Xi 应 当 有 相同 的 密度 . 换 句 话说 , 这 种 变换 
只 不 过 相当 于 给 变量 重新 命名 ,因而 无 需 再 考虑 . 
定理 ”假定 XI 和 X2 相互 独立 ， 并 且 玉 , 了 也 是 独立 的 . 如 果 没 有 一 个 系数 aj。 
为 0, 则 所 有 这 4 个 变量 都 是 正 态 的 . 

(4.1) 式 最 有 趣 的 特殊 情形 是 由 放 转 引起 的 , 即 由 如 下 的 变换 引起 的 ， 


Yi = X1 cosw + X2sinw, Y2 = —X1 sinw + X2 cosw, (4.2) 


@ 费 希 尔 在 1929 年 不 用 覆盖 定理 的 知识 ,导出 了 Vi 中 最 大 项 的 分 布 ， 而 在 W. L. 斯 蒂 文 证 明了 
覆盖 定理 以 后 ， 费 希 尔 又 在 1940 年 说 明了 与 覆盖 定理 的 等 价 性 ( 见 Fisher's Contributions to 
Mathematical Statistics John Wiley, New York (1950) 中 第 16 篇 与 第 37 篇 论文 ). 对 于 用 傅 
里 叶 分 析 的 另 一 推导 , 见 格雷 南 德 与 罗 森 布 拉 特 (U. Grenander and M. Rosenblatt)(1957). 

* 有 星 号 的 诸 节 对 理解 下 文 是 不 需要 的 ， 初 读 时 可 略 去 
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其 中 w 不 是 3 的 代数. 应 用 此 定理 于 这 种 情形 , 我 们 得 到 以 下 的 . 
系 “如果 XI 和 Xo 是 独立 的 , 并 且 存 在 一 个 旋转 (4.2) 使 得 Ji 和 YE 也 是 独立 的 ， 
则 Xi 和 X2 具有 正 态 分 布 , 且 具 有 相同 的 方差. 在 这 种 情形 下 , Yi 和 区 对 每 个 忆 
都 是 独立 的 . 
例 一 支 克 其 市 的 速度 分 布 .在 研究 分 子 在 Ra 中 的 速度 分 布 时 ,去 克 斯 书 假 设 , 在 
每 个 笛 卡 儿 (Cartesian) 坐标 系 中 ,速度 的 3 个 分 量 是 期 望 为 0 的 相互 独立 随机 变 
基 ， 应 用 旋转 ( 留 一 个 轴 固 定 )， 我 们 的 系 立即 表明 ，3 个 分 量 是 正 态 分 布 的 ， 且 具 
有 相同 的 方差 正如 我 们 在 2.3 节 中 所 看 到 的 这 暗示 了 麦克 斯 书 的 速度 分 布 . 

这 个 定理 有 一 段 温 长 的 历史 ， 可 追溯 到 麦克 斯 韦 的 研究 . 纯粹 的 概率 研究 由 卡 
区 (M. Kac)(1940) 和 S. 伯 因 斯 坦 (1941) 开始 ,他 们 假定 有 限 方差 而 证 明了 我 们 的 
系 . 许多 作者 常常 用 比较 高 深 的 方法 致力 于 定理 的 改进 和 变形 , 在 V. P. 斯 基 托 维 
奇 9 证 明 的 结果 中 达到 了 项 点. 

现在 ,在 连续 密度 的 情形 下 进行 证 明 . 我 们 分 别 以 w 和 方 来 表示 X) 入 的 
密度 .为 简略 起 见 ， 我 们 令 


Wi = aazl +alaza， th = 02171 二 azzza。 (4.3) 
在 定理 的 条 件 下 必须 有 
fi(y1)fa(y2) = ta(za)uz(zz). (4.4) 
我 们 将 证 明 , 这 个 关系 式 列 含 
f(y) = +eriW), wi(z) = +es0°), (4.5) 


其 中 指数 是 不 超过 二 次 的 多 项 式 . 这 种 形式 的 概率 密度 只 能 是 正 态 密 度 . 因此 ， 对 
于 具有 连续 密度 的 分 布 ,这 个 定理 包含 在 下 列 引 理 中 . 
引 理 ”假定 4 个 连续 函数 所 和 uj 以 函数 方程 (4.4) 联系 着 ,并且 人 系数 aj, 都 不 为 
0,， 则 这 些 函 数 具有 形式 (4.5)， 其 中 指数 是 次 数 < 2 的 多 项 式 . 

(当然 , 假设 没有 一 个 函数 恒 等 于 0.) 
证 首先 注意 我 们 的 函数 没有 一 个 为 0. 实际 上 ，, 如 果 不 是 这 样 ,那么 在 z1z2 平 
面 内 存在 一 个 区 域 9, 使 得 在 这 区 域内 (4.4) 式 的 两 项 不 为 0, 而 在 它 的 边界 上 , 这 
两 项 为 0. 但 是 (4.4) 式 两 边 , 一 方面 要 求 边界 由 平行 于 坐标 轴 的 线段 组 成 , 另 一 方 
面 要 求 边界 由 平行 于 直线 y; = 常数 的 线段 组 成 . 这 个 矛盾 就 说 明了 没有 这 样 的 边 
界 存在 . 

@ Izvestia Acad，Nauk SSSR, Vol.18(1954), pp，185-200. 定理 : 令 X1,.… ,Xn 是 相互 独立 


的 , Yi = DaiXi 和 Y2 = DbiXi, 其 中 没有 一 个 系数 为 0. 如 果 Yi 和 Y2 是 独立 的 , 那么 Xi 是 
正 态 分 布 的 
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因此 , 可 以 假定 我 们 的 函数 是 严格 正 的 . 取 对 数 , 可 把 (4.4) 式 改写 成 
P(N) + pa(y2) = wi(z1) + wa(z2). (4.6) 
对 于 固定 的 hi 和 h2, 定义 混合 差 算 子 A 为 
Av(z1,72) = u(zl + hi,z2 + h2) — v(z1 + hi,z2 — h2) 
—v(z1 — hi zo + h2) + vz1 — hi, x2 — ho). (4.7) 
因为 每 一 个 wj 依赖 于 单个 变量 z;,， 由 此 推出 Awj = 0. 同样 
Api(y) = ptt) -pig tt) — pn -ta)+op(n -ty), (4.8) 
其 中 为 了 简略 , 我 们 令 
t1 = allja + a12h2, t2 = allja — a12h2. (4.9) 


于 是 我 们 有 Apl + Apa = 0, 其 中 yp; 依赖 于 单个 变量 yj;. 保持 yo 固定 , 我 们 看 
出 ，Ap(m) 是 只 依赖 于 hi 和 ha 的 常数 .现在 我 们 选择 hi 和 ho, 使 = 土 和 
t= 三 0, 其 中 上 是 任意 的 且 固定 的 , 于 是 关系 式 Apl = 常数 ， 且 取 形 式 


el( +t) + pi(y —t) — 2p1() = A(). (4.10) 


在 p1 取 最 小 值 的 点 yi 的 邻 域 , 左边 > 0, 因此 仅 当 在 原点 的 菜 个 领域 内 的 所 有 
都 有 A(t) > 0 时 , 才能 存在 这 样 的 点 . 但 是 , 在 这 种 情形 下 ,yp 不 能 有 最 大 值 . 现 
在 , 在 3 个 点 上 为 0 的 连续 函数 取 最 大 值 或 最 小 值 ,我们 断定 : 如 果 (4.10) 式 的 连 
续 解 在 3 个 不 同 点 上 等 于 0, 则 它 恒 等 于 0. 

每 个 二 次 多 项 式 gq(y1) = a + By +7 都 满足 形 如 (4.10) 式 的 方程 (右边 不 
同 ), 从 而 这 对 差 pi(y) - 9(%i) 也 是 正确 的 . 但 是 , 可 以 选取 9 使 得 这 个 差 在 3 个 
指定 点 上 等 于 0, 于 是 pi(w) 恒 等 于 9. 同一 论证 适用 于 yp2. 这 就 证 明了 关于 广 和 
五 的 断言 . 因为 变量 X; 入 起 相同 的 作用 ,所 以 同一 论证 适用 于 密度 ww > 


3.5 ”矩阵 记号 , 协 方差 矩阵 


3.1 节 所 用 的 记号 是 繁琐 的 ， 并且 在 更 高 维 中 将 变 得 更 繁琐 . 利用 矩阵 记号 可 
以 达到 思维 的 优美 和 节约 . 


为 参考 方便 起 见 , 我 们 概述 后 面 将 用 到 的 矩阵 理论 的 一 些 事实 和 记号 . 基本 规则 是 : 首 
先是 行 , 其 次 是 列 . 因此 , a x 6 矩阵 4 含有 a 行 和 6 列 , 它 的 元 素 记 为 a;, 第 1 个 下 标 
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表示 行 , 第 2 个 下 标 表 示 列 . 如 果 BB 是 含有 元 素 bx 的 8 x 7 矩阵 , 则 乘积 A4B 是 含有 元 
素 ajbix + ajobzk 十 … 十 Qjsbek 的 a x 7Y 矩阵. 如 果 A 的 列 数 与 B 的 行 数 不 相 等 , 就 不 
能 定义 乘积 . 结合 律 (4B)C = A(BC) 成 立 , 而 一 般 地 4B 关 瑟 4, 转 置 阵 47 是 含有 元 
案 oF = ou 的 8 x a 矩阵 . 显然 , (A4B)™ = BTAT. 

只 含有 一 行 的 1 x a 矩阵 称 为 行 向 量 ， 只 含有 一 列 的 甜 阵 称 为 列 向 量 .， 行 向 量 > 一 
(r1,… ,Ta) 容易 印刷 , 列 向 量 用 它 的 转 置 cr = (c1,… , ca) 表示 较 好 . 注意 , cr 是 wx a(“ 乘 
法 表 ” 型 ) 短 阵 , 而 rc 是 |z| 算 阵 ， 即 标量 . 在 a = 2 的 情形 ， 


cr = ( i re = (ricl + r2c2). 
carl cor2 

零 向 量 的 所 有 分 量 都 等 于 0. 

行 数 和 列 数 相同 的 矩阵 称 为 方 阵 ， 对 于 方 阵 4， 有 一 个 与 它 有 关 的 行列 式 ， 行 列 式 的 
值 用 |4| 表示 . 为 此 目的 ， 只 要 知道 行列 式 是 可 乘 的 就 行 了 ; 如 果 A 和 B 都 是 方 阵 , 并 且 
C= 4, 则 |C| = |4||B|, 转 置 阵 47 和 4 有 相同 的 行列 式 . 

所 谓 单位 阵 是 指 在 主 对 角 线 上 各 元 素 均 为 1, 而 在 其 他 位 置 上 各 元 素 均 为 0 的 方 阵 . 如 
果 工 是 含有 r 行 和 r 列 的 方 阵 ，4 是 7 xr 矩阵, 显然 , TA = 4T = A. 所 谓 4 的 过 阵 
是 指使 A4-! = 4-14 = 工 的 矩阵 4-:[ 只 有 方 阵 才 有 逆 阵 ， 逆 阵 是 唯一 的 ， 因 为 如 果 B 
是 4 的 任 一 逆 阵 , 则 我 人 有 AB = I. 由 结合 律 , 4 : = (A-!1A)B = B]. 没有 逆 阵 的 方 
阵 称 为 奇异 阵 . 行列 式 的 可 乘 性 蕴含 行列 式 为 0 的 矩阵 是 奇异 的 . 反之 亦 然 , 如 果 |4| 关 0， 
则 4 是 非 奇异 的 . 换 句 话说 ,为 使 矩阵 4 是 奇异 的 , 当 且 仅 当 存在 一 个 非 0 向 量 z, 使 得 
zA=0. 

如 果 ajk = akj, 即 4T = 4, 则 方 阵 A 是 对 称 的 ,与 对 称 的 7+ xr 给 阵 A 有 关 的 二 次 
型 定义 为 

z4zT = 》 aikzizk, 

jh 
其 中 z1,…,zr 是 未 定 的 . 如 果 对 于 所 有 的 非 零 向 量 > 有 rz4zT > 0, 是 称 矩阵 A 是 正定 
的 . 由 上 述 准则 推出 , 正定 矩阵 是 非 奇 异 的 . 
在 R" 中 的 旋转 ”为 完备 起 见 ， 我 们 简要 地 提 及 矩阵 计算 的 一 个 几何 上 的 应 用 ， 虽 然 以 后 
没有 用 到 . 
两 个 行 向 量 2 = (Zz1,…,za) 和 Y= (W1,… ,ya) 的 内 积 定义 为 
oy = ye" = 》 zs. 
i=1 

zw 的 长 度 L 由 L? = zzT 给 出 . 如 果 = 和 y 是 具有 单位 长 度 的 向 量 , 那么 它们 之 间 的 夹 角 
5 由 cos6 = zyT 给 出 . 


@ 这 实际 上 是 语言 的 滥用 . 在 具体 情形 下 ,zl 可 以 表示 磅 , x2 可 以 表示 奶牛 , 于 是 (z1, 22) 在 严格 
的 意义 上 不 是 一 个 向 量 . 
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a xc 和气 阵 4 导出 一 个 把 = 映 为 上 = z4 的 变换 ; 对 于 转 置 阵 , 我 人 有 €7 = ATzT. 
矩阵 4 是 正 交 的 ,如果 导 出 变换 保持 长 度 和 夹 角 不 变 , 也 就 是 说 , 如 果 任 意 两 个 行 向量 和 
它们 的 像 有 相同 的 内 积 . 因此 , 为 使 A 是 正 交 的 ， 当 且 仅 当 对 于 任意 一 对 行 向 量 2,y， 


z44TVT = zgT. 


这 蕴含 44T 是 一 个 单位 阵 T， 这 是 可 以 看 出 的 ,只 要 对 向 量 z 和 3 选取 a 一 1 个 为 零 的 
分 量 即 可 . 于 是 我 们 得 到 , 为 使 4 是 正 交 的 ， 当 且 仅 当 44T7 = 工 由 于 A 和 AT 有 相同 的 
行列 式 , 因而 它 等 于 +1 和 -1. 行列 式 为 1 的 正 交 阵 称 为 旋转 阵 ， 且 导 出 变换 是 一 个 旋转 
变换 . 


今后 我 们 用 理解 为 行 向 量 的 单个 字母 来 表示 7 维 空间 了” 中 的 点 ， 如 m = 
(zzr) 7f(z) = jz …zr) 等 . 不 等 式 理解 为 各 个 坐标 分 量 不 等 式 : 为 使 = < 
VY， 当 且 仅 当 对 于 上 = 1,…,7,Zk < yk. 对 于 其 他 不 等 式 也 类 似 . 在 平面 R? 上 , 关 
系 式 2 < Y 可 以 读 作 “z 位 于 y 的 西南 ”. 这 个 记号 的 新 特点 是 , 两 个 点 不 需要 两 
个 关系 式 2 < y 或 y < z 中 的 一 个 成 立 , 也 就 是 说 , 在 高 维 中 不 等 号 只 引入 偏 序 . 

我 们 记 天 = (X1,…, Xr) 为 坐标 变量 的 行 向 量 , 并 且 一 般 地 对 随机 变量 (主要 
是 对 正 态 分 布 变量 ) 利用 这 个 记号 . 

如 果 变量 X1,…,X- 有 期 望 E(X;), 我 们 就 记 E( 入 ) 为 具有 分 量 E(Xi) 的 行 向 
量 . 向 基 XX - E(X) 的 期 望 为 0. 更 一 般 地 ,如果 M 是 一 个 矩阵 ， 其 元 素 Mj;, 是 
一 随机 变 基 , 我 们 就 以 E(M) 表示 元 素 为 E(M;, )( 假 定 它 存在 ) 的 矩阵 . 
定义 ”如 果 E( 闫 ) = 0, 则 下 的 协 方差 短 阵 Var( 忌 ) 是 一 个 元 素 为 也 (XiXk)( 假 定 
它们 都 存在 ) 的 7 xr 对 称 短 阵 . 即 ， 


Var(X)=E(XTX). (5.1) 
对 于 任意 多 ,我 们 定义 Var( 累 ) 和 Var( 处 一 E(X)) 一 样 . 
行 向 基 的 利用 需要 把 由 R” 到 R™ 的 线性 变换 写成 形式 
Y=XA, (5.2) 
即 


Wk = Dor k=1,.,m, (5.3) 
pa 


其 中 4 是 "xm 矩阵. 显然 , 当 E(X) 存在 时 , E(Y) = E( 久 )A4. 为 求 出 方差 , 不 
失 一 般 性 , 我 们 假设 E(X) =0, 于 是 E(Y) =0, 并 且 


E(YTY)=E(ATXTXA)= ATE(XTX)A. (5.4) 
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因此 , 我 们 有 一 个 重要 结果 : 
Var(Y) = ATVar(Y)A. (5.5) 
特别 有 趣 的 是 , 当 m = 1 时 ， 
Y=aXi+..+arX, (5.6) 


是 普通 的 随机 变 基 . 这 里 Var(Y) 是 一 个 (标量 ) 二 次 型 


Var(Y) = D) E(X;Xk)ajax. (5.7) 
jk=1 
如 果 Var(Y) = 0， 则 线性 型 (5.6) 以 概率 1 等 于 0， 并且 在 这 种 情形 中 ， 超 平面 
于 akzk = 0 以 外 的 每 个 区 域 的 概率 是 0. 概率 分 布 于 是 集中 在 (r - 1) 维 流 形 上 ， 
它 在 7 维 中 考虑 时 是 进化 的 . 现在 我 们 业已 证 明 : 任 一 非 有 退化 概率 分 布 的 协 方差 答 
阵 是 正定 的 . 反之 ,每 个 这 样 的 矩阵 可 以 作为 正 态 密度 的 协 方差 矩阵 ( 见 3.6 节 定 
理 4). 


3.6 ” 正 态 密度 与 正 态 分 布 
在 本 节 中 , Q 表示 对 称 的 > x 7 矩阵 ,gfz) 表示 有 关 的 二 次 型 


qz)= 》 zizk 一 zQzT， (6.1) 
KE1 


其 中 z = (z1,…,zr) 是 行 向 量 . 在 R7 中 用 指数 上 含有 二 次 型 的 短 定 义 的 密度 是 
直线 上 正 态 密 度 的 自然 对 应 物 , 因此 我 们 从 下 列 定义 开始 . 
定义 7 维 密度 P 称 为 正 态 @ 的 ， 并 且 中 心 在 原点 ， 如 果 它 有 形式 


92(z) = ?1e-ia()， (6.2) 


其 中 是 常数 . 中 心 在 a 二 (a1,a2,…,ar) 的 正 态 密度 由 p(z 一 a) 给 出 . 

二 维 的 特殊 情形 已 在 3.1 节 例 (d) 和 3.2 节 例 (a) 中 予以 讨论 . 

我 们 取 以 (6.2) 为 概率 密度 的 R7 作为 样本 空间 , 并 以 久 = (Xi,…,X,) 表示 
由 坐标 变量 构成 的 行 向 量 . 它 的 协 方差 矩阵 以 RM 来 表示 : 


M = Var(X) = E(XTX). (6.3) 
@ “退化 的 " 正 态 分 布 将 在 本 节 末 引 入 . 
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我 们 的 问题 是 研究 矩阵 Q 和 M 的 本 质 和 它们 之 间 的 联系 . 

首先 , 我 们 看 到 Q 的 对 角 线 元 素 都 不 能 等 于 0. 实际 上 , 如 果 我 们 有 grr = 0， 
那么 对 于 z1,… ,zr-1 的 固定 值 , 密度 (6.2) 取 re “te 的 形式 , 它 关于 zr 的 积 
分 发 散 . 现在 我 们 引入 由 下 式 定义 的 变换 y = 4: 


Yi 三 TI Yr = Zr- (6.4) 


Yr 一 glrZl 十 … 十 grrZr、 


由 观察 可 以 看 出 , 9(z) 一 多 /grr 是 Zz1,… ,zr-1( 不 合 zr) 的 二 次 型 . 因此 


四 = 二 吕 +g)， (6.5) 
其 中 gl(y) 是 妇 ,…,y_1 的 二 次 型 . 这 表明 向 晤 六 A4 有 正 态 密度 , 此 密度 被 分 
解 为 二 和 (名 ，,…, 世 1) 的 两 个 正 态 密度 . 所 作出 的 第 1 个 结论 是 简单 而 重要 的 : 
定理 1 正 态 密度 的 所 有 边线 密度 还 是 正 态 的 - 
难以 料 到 的 是 : 
定理 2 ”存在 一 个 行列 式 为 正 的 短 阵 C, 使 得 2 = 第 C 是 一 个 行 向 量 , 其 分 量 2j 
是 相互 独立 的 正 态 变量 . 
矩阵 C 不 是 唯一 的 事实 上 ， 这 个 定理 可 以 强化 为 ，C 可 以 选 为 状 转 埠 阵 ( 见 
习题 19). 
证 “我们 用 归纳 法 证 明 . 当 r = 2 时 ,断言 已 包含 在 分 解 式 (6.5) 中 . 如 果 定 理 在 
7 一 1 维 时 是 正确 的 ,那么 变量 久 ,…, -1 是 独立 正 态 变量 7,…， 2,_1 的 线性 组 
合 , 而 攻 本 身 是 正 态 的 且 与 其 余 变 基 独 立 . 因为 YA-!， 所 以 还 推出 , X; 是 
及 ，,…,2_1 和 六 的 线性 组 合 . 4 的 行列 式 等 于 gr， 且 (6.5) 歼 含 它 是 正 的 . 变换 
XX 一 2 的 行列 式 是 A 的 行列 式 与 变换 Y 2 的 行列 式 的 乘积 , 因而 它 是 正 的 . 
> 
定理 3 矩阵 Q 和 RE 互 为 递 阵 ， 且 


7 = (27)"|M), (6.6) 


其 中 IM|= |IQI: 是 M 的 行列 式 . 
证 利用 上 一 定理 的 记号 , 令 


D=E(2ZT2Z)= CTMC. (6.7) 


这 是 一 个 对 角 线 上 各 元 素 为 E(2?) = c?， 而 对 角 线 外 各 元 素 为 0 的 矩阵 2 的 密 
度 是 这 些 正 态 密度 n(zo7')o7! 的 乘积 , 从 而 它 由 对 角 线 元 素 为 o3 的 矩阵 DD-! 导 
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出 . 于 是 2 的 密度 可 由 天 的 密度 (6.2) 通过 代 换 = = zC-: 并 乘 以 行列 式 |C- 
得 出 . 因此 ， 


zD- 1zT = zQzT (6.8) 
和 
27)"ID| = TICP， (6.9) 
由 (6.8) 可 以 看 出 ， 
Q=CD-ICT. (6.10) 


由 (6.7) 看 来 , 这 蕴含 Q = M-:!. 由 (6.7) 还 推出 |D| = |M| .1Cj?, 因此 (6.9) 等 价 
于 (6.6). 

特别 , 此 定理 蕴含 M 的 分 解 对 应 于 Q@Q 的 类 似 分 解 , 因此 我 们 有 
了 票 ”如 果 (Xi,X2) 是 正 态 分 布 的 , 则 为 使 Xi 和 XX2 是 独立 的 ， 当 且 仅 当 Cov( Xi， 
Xz) =0, 即 当 且 仅 当 Xi 和 Xo 是 不 相关 的 . 

更 一 般 地 , 如 果 (X1,…, Xr) 有 正 态 密度 , 则 为 使 (X1,…, Xn) 和 (Xn+1,…， 
Xr) 是 独立 的 ， 当 且 仅 当 对 于 j < n,k > n,Cov(X;, Xk) =0. 
注意 ”这 个 系 依赖 于 (Xi,X2) 的 联合 密度 是 正 态 的 ; 如果 只 知道 XI 和 X2 的 边 
绕 密 度 是 正 态 的 ， 则 这 个 系 就 不 能 应 用 . 在 后 一 情形 下 ，(Xi, 义 2) 的 密度 不 一 定 是 
正 态 的 , 事实 上 并 不 一 定 存在 . 这 一 事实 常 被 误解 (见习 题 2 和 习题 3). 
定理 4 为 使 拒 阵 RM 是 正 态 密度 的 协 方差 矩阵 ， 当 且 仅 当 它 是 正定 的 . 

因为 密度 由 矩阵 Q = RM- 导出 , 所 以 定理 的 一 个 等 价 叙述 是 : 为 使 起 阵 @ 
导出 正 态 密度 (6.2)， 当 且 仅 当 它 是 正定 的 . 
证 我 们 已 在 3.5 节 末 看 到 ,每 个 密度 的 协 方差 矩阵 是 正定 的 . 当 7 = 1 时 道 命题 
是 成 立 的 . 我 们 用 归纳 法 予以 证 明 . 假设 @ 是 正定 的 , 对 于 zl = … = zr_1 = 0， 
我 们 得 到 q(z) = grrzz， 从 而 grr>o. 在 此 假设 下 , 我 们 看 出 9 可 以 化 为 (6.5) 的 形 
式 . 选 出 使 yr = 0 的 z+, 我 们 看 出 Q@ 的 正定 性 昔 含 着 对 于 z1,…,zr-1 的 一 切 选 
择 , 都 有 4(z) > 0. 因此 , 根据 归纳 法 假设 , 5 对 应 于 7 一 1 维 正 态 密度 . 显然 由 (6.5) 
式 , 9 对 应 于 7 维 正 态 密度 , 这 就 完成 了 证 明 . > 

根据 (6.5) 式 的 解释 , 我 们 用 条 件 密度 推出 这 个 一 般 理 论 ， 此 条 件 密度 导致 在 
3.2 节 例 (a) 中 对 于 二 维 情形 已 阐述 过 的 回归 理论 的 一 般 描 述 . 

为 简 路 计 , 令 ax = -gkr/gqrr, 因此 


Yr = grr(zr 一 alzl 一 … 一 ar-lZr-1). (6.11) 


为 了 给 出 系数 ak 的 一 种 概率 解释 ,我们 记得 ,，Y; 是 与 X1,…,X;-! 独立 的 . 
换 句 话说 ,ak 是 使 
了 = 和 一 aa 一 … 一 ar-iXr_ (6.12) 
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与 (X1,…,X;) 独立 的 数 . 这 一 性 质 唯一 地 表示 了 系数 ax 的 特性 . 

为 了 得 到 在 给 定 X = z1,…, Xr-_! = zr-1 下 Xr 的 条 件 密度 ， 我 们 应 当 将 
(X1,…,Xr) 的 密度 除 以 (XXXr-1) 的 边缘 密度 . 由 (6.5) 式 , 我 们 得 到 含有 指 
数 38 /gr 的 指数 密度 . 由 此 推出 , 在 给 定 Xi = Zz1,…,Xr_1 = zr-1 下 Xi 的 条 
件 密度 ,是 一 个 具有 期 望 uizl 十 … 十 ar_1zr-1 与 方差 1/qrv 的 正 态 密度 . 因此 ， 


E(Xr|X1,, Xr) = alX1 十 … 十 ar-1Xr-1. (6.13) 


于 是 我 们 证 明了 已 在 (2.6) 中 体现 了 的 二 维 回归 理论 的 下 列 推广 . 

定理 5 ”如果 (X1,…, Xr,) 有 正 态 密度 ， 那 么 在 给 定 XI1,…，Xr_1 下 Xr 的 条 
件 密度 也 是 正 态 的 . 而 且 ， 如 果 了 与 (X1,…,Xr-1) 独立 ， 则 条 件 期 望 (6.13) 是 
X1,…,Xr-_1 唯一 的 线性 函数 . 条 件 方差 等 于 Var(T) = gn. 

例 样本 均值 与 样本 方差 , 在 统计 学 中 , 随机 变量 


交 1OG 二 二 和) 全 = 工科 (Xe 一 冯 ) (6.14) 
入 rt 


分 别称 为 不 = (Xi,…,Xr) 的 样本 均值 与 样本 方差 .一 个 奇妙 的 事实 是 ， 如 果 
Xi 和 是 满足 E(Xr) = 0,E(X?) = o2 的 独立 正 态 变 量 , 则 随机 变量 总 和 52 是 
独立 的 . 9 

此 证 明说 明 上 述 结果 的 适用 性 . 我 们 令 丈 = Xe 一 兰 ,(k < 7 一 1), 而 六 == 六。 
从 天 到 Y= (i,…, 六 ) 的 变换 是 线性 的 和 非 奇 异 的 , Y 有 正 态 密 度 . 因为 对 于 
<r 一 1,E(YiY) = 0, 所 以 丈 与 (六,… ,Yi1) 独立 . 但 是 ， 


ro2 = YP+. + Yi+ (+ + (6.15) 


只 依赖 于 六 ,…,Y-1, 因此 62 确实 与 二 = 匀 独立 . 

一 般 的 正 态 分 布 

由 引 理 推出 , 如 果 互 = (Xi1,…,X-) 有 正 态 密 度 , 那么 每 个 非 零 线性 组 合 Yi = 
alX1 十 … 十 arXr 也 有 正 态 密度 ,这 对 于 每 个 对 偶 ( 装 , 到) 同样 是 正确 的 ， 只 要 没 
有 线性 关系 式 c1Yi + czY2 = 0 成 立 . 在 这 种 特殊 情形 下 ，(Yi,Y) 的 概率 分 布 集中 
在 方程 cry + czyo = 0 确定 的 直线 上 . 因此 ,如 果 把 它 看 作 是 二 维 分 布 ,那么 它 是 
奇异 的 . 在 很 多 场合 , 对 于 集中 在 低 维 流 形 (例如 个 别 的 轴 ) 上 的 退化 分 布 , 仍然 保 
持 正 态 分 布 这 个 术语 是 合乎 需要 的 . 最 简单 的 一 般 定 义 如 下 : Y = (Yi,…,Y) 的 分 
布 是 正 态 的 ， 如果 存 在 这 样 一 个 具有 正 态 7 维 密度 的 向 量 不 = (X1,…,Xr), 使 得 
Y =a+XA, 其 中 4 是 rxp( 常 数 ) 矩阵 , a = (a1,…,ap). 如 果 p>?r, 那么 在 p 

@ 吉 里 (R. C. Geary) 和 卢 卡 克 斯 (E. Lukacs) 指出 , 这 个 事实 表示 Rl 中 正 态 分 布 的 特性 ， 
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维 中 , Y 的 分 布 是 退化 的 ; 对 于 p < r, 为 使 它 是 非 退化 的 , 当 且 仅 当 p 使 所 定义 
的 Yk 是 线性 独立 的 . 
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本 节 的 目的 , 部 分 地 是 提供 正 态 分 布 的 例子 , 部 分 地 是 导出 在 离散 随机 过 程 和 
时 间 序 列 理论 中 有 重要 应 用 的 一 些 关系 式 .它们 具有 分 析 的 特性 ， 并 且 容 易 从 较 
高 深 的 随机 分 析 中 分 出 . 事实 上 , 我 们 将 只 讨论 有 限 维 正 态 密 度 , 或 者 等 价 地 只 讨 
论 它 们 的 协 方差 矩阵 ， 引 用 随机 变 基 对 概率 直观 是 很 重要 的 ， 并 可 作为 应 用 的 准 
备 , 但 是 在 目前 我 们 只 讨论 它们 的 联合 分 布 ; 随机 变量 本 身 仅 作为 由 指出 相应 的 集 
(Xu ，…Xas) 来 描述 所 有 的 边缘 密度 的 方便 方法 . 同样 ， 提 到 无 穷 序列 {Xk} 只 
是 缉 含 ，(X1,…, Xn) 中 的 项 数 可 以 取 任 意 大 . 

事实 上 , 我 们 将 考虑 双边 无 穷 序 列 {…, 久 -2, 六 -1,…}. 这 种 序列 表明 , 对 应 于 
每 个 有 穷 集 (Xn,,…, Xn,.), 我 们 给 出 一 个 具有 显然 的 相 容 性 法 则 的 正 态 密度 . 序 
列 是 平稳 的 , 如 果 这 些 分 布 关于 时 间 推 移 是 不 变 的 , 即 如 果 对 于 固定 的 nl，……mnr， 
形 如 (Xm,.，…, Xn,4。) 的 所 有 7 元 组 , 具有 与 v 独立 的 相同 分 布 . 对 于 7 = 1 这 
雍 含 期 望 与 方差 是 常数 , 因此 不 失 一 般 性 可 设 E(Xn) = 0. 联合 分 布 完全 由 协 方差 
pj 二 了 (XiXk) 确定 , 平稳 性 要 求 pj。 只 依赖 于 差 必 一 外 从 而 我 们 令 pjjtn = rm， 
因此 

Tn = E(XkXk+n) = E(Xk-nXk), (7.1) 

于 是 rn = r-n. 实际 上 , 我 们 只 讨论 可 作为 平稳 过 程 的 协 方差 的 数列 rn. 

在 本 节 中 , {Zn} 表示 由 下 式 正规 化 的 相互 独立 正 态 变量 的 双边 无 穷 序列 : 


E(Zn) =0，E(22) = 1. (7.2) 
通过 给 定 的 序列 {Zn} 来 构造 平稳 序列 的 3 种 方法 将 予 叙述 . 它们 在 时 间 序列 分 析 


中 被 普遍 使 用 , 并 可 作为 平常 运算 的 练习 . 
例 (a) 广义 移动 平均 过 程 . 对 于 任意 常数 bo,b,…,bn, 令 


Xn = boZn + biZn-1+***+ bNZn—N. (7.3) 


在 相等 系数 bi = 1/(N+Dl) 的 特殊 情形 , 变量 X 是 时 间 序 列 分 析 中 用 来 “ 磨 光 ” 数 
据 的 那 种 类 型 的 算术 平均 值 ( 即 消除 局 部 不 规则 性 ). 在 一 般 情形 下 , (7.3) 式 表示 把 
平稳 序列 {Zn} 变 为 一 个 新 平稳 序列 {Xn} 的 线性 算 子 . 这 种 算 子 的 流行 术语 是 “ 滤 


* 后 面 没有 用 到 . 特别 地 , 3.8 节 可 以 独立 地 阅读 (参见 19.8 节 ). 
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波 器 ”. 序列 {Xn} 的 协 方差 为 


Tk =7k=E(XnXntk) = 》 bobo (k>0), (7.4) 
5 


这 级 数 只 含有 穷 多 项 . 

因为 3jbubu+k| < 品 十 可 4， 所 以 表达 式 (7.4) 对 于 使 于 如 < oo 的 无 穷 序列 也 
是 有 意义 的 . 容易 看 出 , 协 方差 矩阵 序列 的 极限 仍然 是 协 方差 矩阵 . 令 NN 一 00, 我 
们 断言 , 对 于 世相 < oo 的 任 一 序列 bo,bI…,(7.4) 式 中 的 数 rk 可 以 作为 平稳 过 程 
{Xn} 的 协 方差. 在 形式 上 , 对 于 新 过 程 我 们 得 到 


Xn = DbeZnk (7.5) 
k=0 

不 难 证 明 , 每 个 具有 协 方差 (7.4) 的 平稳 过 程 都 有 这 种 形式 , 但 是 关系 式 (7.5) 包含 
无 穷 多 个 坐标 , 我 们 现在 还 不 能 予以 证 明 . ( 见 19.8 节 .) 
例 (b) ” 自 回 归 过 程 . 自从 时 间 序 列 分 析 开 始 以 来 , 已 经 提出 了 各 种 理论 模型 来 解 
释 诸 如 经 济 的 时 间 序 列 、 太 阳 黑 子 和 被 观测 (或 设想 ) 的 周期 性 这 样 一 类 经 验 现象 . 
最 普通 的 模型 假设 , 过 程 的 变 其 Xn 和 我 们 的 (7.2) 的 独立 正太 变量 序列 Zu, 通过 
下 列 形式 的 自 回归 方程 相 联系 . 


QoXn 十 a1Xn-1 十 … 十 QNXn-N = Zn. (7.6) 


这 个 模型 根据 的 是 如 下 的 经 验 假设 : 变节 Xn 在 时 刻 n 的 值 (价格 、 供 应 物 或 
强度 ) 依赖 于 它 过 去 的 发 展 情况 并 加 上 一 个 “随机 扰动 ” Zn, 这 扰动 与 过 去 无 关 . 通 
常 就 是 这 样 , 线性 相关 性 的 假设 用 来 简化 理论 分 析 (或 者 使 其 成 为 可 能 ). 更 一 般 的 
模型 可 由 令 N 一 co 或 者 令 Zn 是 另 一 平稳 过 程 的 变量 而 得 出 . 

如 果 ao 关 0, 则 我 们 可 以 任意 的 方式 来 选取 (Xo,… ,XN-1), 然后 递 推 地 计算 
XNXN+ 和 X-bX-2…… 在 这 种 意义 上 ，(7.6) 式 决定 了 一 个 过 程 ,但 我 们 
问 , 是 否 存 在 一 个 平稳 解 呢 ? 

为 了 回答 这 个 问题 , 我 们 把 (7.6) 式 改 写成 不 包含 最 接近 于 Xv 的 前 面 那些 项 
的 形式 . 考虑 (7.6) 式 并 把 n 依次 换 为 n 一 1,n 一 2,…,n 一 v. 将 这 些 方程 分 别 乘 以 
1,b2，,…,bo, 加 到 (7.6) 式 上 . 为 使 变量 X，_1,…, Xn- 不 出 现在 新 方程 中 , 当 且 
仅 当 b; 满足 

Qobi 十 albo = 0,.…, (7.7) 
Qaoby 十 alb -1 十 … 十 avbo = 0, 
并 且 bo = 1. 于 是 最 后 的 恒等式 具有 形式 


aoXn = boZn + biZn-i t+ boZn-y + Ynv, (7.8) 
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其 中 了 。 是 Xm-。-1,… ,Xn-_N-v 的 线性 组 合 (对 系数 不 感 兴趣 ). 在 (7.8) 式 中 ， 
我 们 已 经 将 变量 X 表示 为 时 刻 n,n 一 1,…,n 一 v 上 的 偶然 作用 与 变量 Ys 释 加 
的 结果 , 变量 Y%,, 表示 在 时 刻 n 一 v 前 时 间 的 影响 . 当 v 一 co 时 , 这 个 时 间 变 成 
为 “无 穷 远 的 过 去 ”， 并 在 大 多 数 情况 下 它 的 影响 消失 了 . 我 们 将 (至 少 是 暂时 ) 假 
设 情况 就 是 这 样 取 极 限 , 也 就 是 说 , 我 们 在 寻找 满足 下 列 极限 关系 式 的 过 程 ， 


aoXn = DbkZn_k. (7.9) 
k=0 
(粗略 地 说 , 我 们 假设 剩余 的 变量 7 趋 于 0, 其 他 可 能 的 极限 将 在 例 (d) 中 指出 ). 
形 如 (7.9) 式 的 过 程 是 例 (a) 的 研究 对 象 . 我 们 看 到 , 当 于 妈 < oo 时 , 平稳 解 
存在 (如 果 级 数 发 散 ， 那 么 连 协 方差 表达 式 也 无 意义 ). 为 了 对 bx 解 方程 (7.7), 我 
们 利用 形式 上 的 母 函 数 


A(s) = Daks', B(s) = Dbks*. (7.10) 


为 使 方程 (7.7) 成 立 , 当 上 且 仅 当 4(s)B(s) = aobo. 4 是 一 个 多 项 式 , B 是 一 个 有 理 
多 项 式 . 因此 , 我 们 可 以 利用 在 第 1 卷 11.4 节 中 研究 过 的 部 分 分 式 理论 . 如 果 多 项 
式 A(s) 有 不 同 的 根 s1,.…, sw, 那么 我 们 得 到 

A ，.， An 
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B(s) = (7.11) 


因而 
bn= Alsi™ 1 十-… 十 4wsN 1 (7.12) 

显然 ,于 好 < co 当 且 仅 当 所 有 的 根 满足 |sj| > 1， 容 易 验 证 这 在 有 重 根 时 也 是 正 
确 的 ， 因 此 ,我 们 证 明了 ， 当 多 项 式 A(s) 的 所 有 根 位 于 单位 圆 外 面 时 ， 自 回归 模 
型 (7.6) 的 平稳 解 存在 ,我 们 这 个 过 程 的 协 方差 由 (7.4) 式 给 出 ， 并 且 在 这 个 过 程 
中 , “无 穷 远 的 过 去 ”不 起 作用 . 

自 回归 方程 (7.6) 的 解 {Xn} 是 唯一 的 . 实际 上 ， 两 个 解 的 差 将 满足 齐 次 方程 
(7.13). 我 们 现在 将 指出 , 条件 |s;| > 1 排除 了 这 方程 有 概率 论 意义 的 解 的 存在 性 . 
例 (c) ”未 化 过 程 .我们 转向 满足 下 列 随 机 差分 方程 的 平稳 序列 {Y%,}: 


aoYn +aYn-1+***+aNYn-_N =0. (7.13) 
它们 表示 一 个 取决 于 (7.6) 式 的 自 回归 过 程 的 有 趣 的 过 程 . 典型 的 例子 是 


Yn = MZ1 cosnw + 2Z-1sinnw) (7.14) 
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和 
Yn = a21 + (一 Da22-1， (7.15) 

其 中 诸 系 数 和 w 都 是 常数 ，2: 和 2_1 是 由 (7.2) 式 规则 化 了 的 独立 正 态 变量 . 这 
些 过 程 满足 (7.13), 第 一 式 有 ao = az = 1 和 al = -2cosw, 第 二 式 有 ao = -a2=1 
和 al = 0. 从 整个 过 程 完全 由 两 个 观测 值 (例如 芍 -: 和 玖 ) 所 决定 的 意义 上 看 , 它 
们 是 退化 的 . 这 两 个 观测 值 在 我 们 所 能 想像 的 遥远 的 过 去 就 被 取 定 . 在 这 个 意义 上 ， 
过 程 完全 由 它 的 “无 穷 远 的 过 去 ”所 决定 . 同样 的 说 明 适 用 于 满足 形 如 (7.13) 的 差 
分 方程 的 任 一 过 程 , 因此 这 些 过 程 形成 例 (b) 的 对 应 过 程 , 其 中 无 穷 远 的 过 去 完全 
不 起 作用 . > 

这 些 例子 表明 , 把 重点 放 在 随机 差分 方程 (7.13) 上 的 普遍 重要 性 . 在 讨论 它 的 
理论 之 前 , 我 们 注意 , 任 一 满足 (7.13) 的 过 程 {Y%} 也 满足 各 种 高 阶 的 差分 方程 ， 
例如 

aoYn + (al — ao)Yn- 1+ + (aN — aNi)Yn_N — aNYn_N-1. 

为 了 使 问题 有 意义 , 我们 应 当 假 定 (7.13) 表示 {Y%} 所 满足 的 最 低 阶 差分 方程 . 这 
等 于 说 N 元 组 (Yi,…,YN) 为 非 退 化 的 , 具有 N 维 正 态 密度 . 它 绚 含 oo 闫 0 和 
Qn #0. 

现在 来 说 明 差分 方程 (7.13) 的 平稳 解 理论 与 下 列 “ 特 征 方程 ” 有 密切 的 联系 : 


ao +aéN-l+...+an =0. (7.16) 


对 于 左边 多 项 式 的 每 个 二 次 因子 , 有 一 个 相应 的 二 阶 随 机 差分 方程 , 它们 都 是 具有 
形式 (7.14) 或 (7.15) 的 过 程 . 因此 , 相应 于 特征 多 项 式 的 因子 分 解 , 我 们 将 把 (7.13) 
式 的 一 般 解 表示 为 形 如 (7.14) 和 (7.15) 的 分 量 之 和 . 
如 前 所 述 , 我 们 假设 中 心 为 E(Y%) = 0. 整个 理论 依赖 于 下 面 的 : 

引 理 1 为 使 具有 (YnYn+k) = 丈 的 平稳 序列 满足 随机 差分 方程 (7.13)， 当 且 仅 
当 

aorn 十 alrn-1 十 … 十 QNrn_N = 0. (7.17) 
证 将 (7.13) 乘 以 Yo 并 取 期 望 得 到 (7.17), 将 (7.13) 的 左边 平方 并 取 期 望 得 到 
志 oi ( 志 akerk-i), 因此 (7.17) 蕴含 着 (7.13) 的 左边 方差 为 0. 这 就 证 明了 引 理 . 


Ld 
我 们 着 手 推 导 rn 的 典型 形式 . 当然 , 它 是 实 的 , 但 是 它 包含 特征 方程 (7.16) 的 
根 , 因此 我 们 必须 暂时 利用 复数 . 
引 理 2 如果 {Yh} 满足 (7.13), 但 不 满足 低 阶 差分 方程 ,那么 特征 方程 (7.16) 具 
有 N 个 单位 模 的 不 同根 61，,…,EN. 在 这 种 情形 下 ， 


Tn 一 cl 好 十 … 十 cN6N， (7.18) 
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其 中 cj >0,j=1,…,N. 
证 首先 假设 特征 方程 (7.16) 有 N 个 不 同 的 根 &,… ,én. 我 们 借助 于 在 第 1 卷 
中 为 了 类 似 的 目的 已 用 过 的 特 解 方法 来 解 (7.17) 式 . 观察 表明 ，(7.18) 表示 一 个 依 
赖 于 N 个 自由 参数 c1,… ,cw 的 形式 解 . 因为 ra 由 N 个 值 rn,……rxw 完全 决定 ， 
所 以 为 了 证 明 (7.17) 的 每 个 解 都 具有 (7.18) 的 形式 ， 只 要 证 明 cj 可 以 这 样 选 择 ， 
即使 得 关系 式 (7.18) 可 得 出 r1,…,rw 的 指定 值 就 行 了 . 这 意味 着 c; 应 当 满足 N 
个 线性 方程 , 方程 的 矩阵 4 具有 元 素 oj = 总 () 大 = 了 …,N),A 的 行列 式 不 等 于 
0,@ 因此 所 要 求 的 解 存在 . 

于 是 我 们 证 实 了 (在 不 同根 的 情形 )rn 确实 具有 (7.18) 的 形式 . 其 次 我 们 将 说 
明 具 有 单位 模 的 根 确实 可 以 在 其 中 出 现 . 我 们 知道 ax 取 0, 因此 0 不 是 特征 方程 的 
根 . 我 们 注意 到 , 协 方差 rn 是 以 Y 的 共同 的 方差 ro 为 界 . 但 是 , 如果 &; 不 具有 
单位 模 , 那么 或 者 当 n 一 co 时 , 或 者 当 n 一 -co 时 , |&j|" 一 oo. 由 此 推出 , 对 于 
每 个 j,|&j| = 1, 否则 cj = 0. 

现在 假设 外 和 &2 是 一 对 共 罗 根 ,cl 关 0, 则 6 具有 单位 模 , 从 而 6&2 = 671. 
此 ,对 称 关系 式 rn = r-n 要 求 c2 = ci, 而 且 弛 十 经 是 实 的 ,因此 ci 应 当 是 实 的 . 
于 是 复 根 以 一 对 有 实 系数 的 共 斩 根 形式 在 (7.18) 中 出 现 , 并 且 如 果 某 些 系数 cj 等 
于 0, 那么 rm 将 满足 阶 数 小 于 N 的 差分 方程 . 因此 , 所 有 的 根 具 有 单位 模 , 所 有 的 
cj 是 实 的 , 并且 oj 关 0. 

为 了 说 明 cj 实际 上 是 正 的 , 我 们 引入 (Yi,…,YN) 的 协 方差 矩阵 R. 它 的 元 素 
由 mj 给 出 , 由 (7.18) 容易 验证 


R= 4CaT， (7.19) 


其 中 C 是 含有 元 素 c; 的 对 角 阵 ,4 是 上 面 引 入 的 矩阵 , A 是 它 的 共 罗 阵 ( 即 它 是 
由 人 把 与 换 为 司 : 而 得 到 的 ). 因为 及 是 实 正定 的 , 所 以 对 于 任意 的 复 N 维 非 零 
行 向 基 m = 二 ww， 
ZRzT = vwRuT +vRvT > 0. (7.20) 
令 y=zA, 它 就 化 为 
N 
yCyT = cilyil? > 0. (7.21) 
j=1 


@ 这 个 行列 式 通常 称 为 范 德 蒙 德 (Vandermonde) 行列 式 . 为 了 证 明 它 不 等 于 0, 要 把 & 换 为 自由 变 
量 =. 于 是 观察 表明 , 行列 式 具有 zP(z) 的 形式 , 这 里 已 是 N 一 1 次 多 项 式 . 当 工 一 2,.… ,én 
时 ，P(z) = 0, 因为 对 于 z 的 这 些 值 , 行列 式 的 两 列 变 成 相同 的 . 因此 , 对 于 z 的 任 一 其 他 值 , 特 
别 是 对 于 z 二 看, 行列 式 可 以 不 等 于 0. 
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因为 4 的 行列 式 不 等 于 0， 所 以 这 个 不 等 式 对 任意 的 y 都 成 立 ， 于 是 如 所 断言 的 
那样 , c; > 0. 

为 了 完成 证 明 , 我 们 将 证 明 特征 方程 不 能 有 多 重 根 . 假设 61 = 名 , 但 是 其 他 的 
根 是 不 同 的 . 我 们 又 得 到 形 如 (7.18) 的 表达 式 (除了 cl6f? 项 换 为 cinE? 项 以 外 ). mm 
的 有 界 性 又 要 求 cl = 0. 在 一 个 二 重 根 的 情形 ,我 们 由 此 得 出 含 少 于 N 个 非 零 项 
的 形 如 (7.8) 的 表达 式 . 我 们 看 出 , 这 是 不 可 能 的 . 同样 的 论证 更 一 般 地 说 明了 不 可 
能 有 多 重 根 . 

我 们 现在 来 叙述 N 为 奇数 情形 的 最 后 结果 . 对 偶数 N 所 需要 的 修改 是 明显 
的 . 
定理 ”假设 平稳 序列 {7%} 满足 N = 2u 十 1 的 差分 方程 (7.13), 但 不 满足 较 低 阶 的 
差分 方程 . 特征 方程 (7.16) 有 vv 对 复 根 6 二 coswj 土 isinwj(wj 是 实数 ) 和 一 个 实 根 
wo 三 土 1. 序列 {Yn} 具有 形式 


Yn = MZowd + DN[Zi; cosnw; + 2-3sinnewy), (7.22) 
j=1 
其 中 2; 是 期 望 为 0 且 方 差 为 1 的 相互 独立 的 正 态 变量 ,而 和 j 是 常数 . 对 于 这 个 
序列 ， 
Tn = M8 + DM cosnw;. (7.23) 
j=1 

反之 ,选取 任意 的 实数 Xu 天 0,wo = 士 1 令 i,…,wj 是 使 0 < wj < 区 的 不 同 

实数 ， 则 (7.22) 确定 了 一 个 具有 协 方 差 (7.23) 的 平稳 过 程 ， 它 满足 一 个 2 十 1 阶 
差分 方程 , 而 不 满足 较 低 阶 差分 方程 . 
证 令 和 和 wj 是 数 ,2; 是 满足 定理 条 件 的 正 态 变量 . 以 (7.22) 定义 变量 Y. 平 
凡 的 计算 表明 , {Y。} 的 协 方差 rn 由 (7.23) 给 出 . 存在 一 个 具有 定理 中 所 说 的 根 & 
的 形 如 (7.16) 的 实 代 数 方程 , 于 是 7; 满足 差分 方程 (7.17). 根据 引 理 1, 这 蕴含 也 
满足 随机 差分 方程 (7.13). 根据 构造 , 这 是 一 个 丈 所 满足 的 最 低 阶 方程. 

有 反之, 令 {Yn} 表示 给 出 的 差分 方程 (7.13) 的 解 . {Yn} 的 协 方差 rn 决定 了 出 
现在 (7.22) 中 的 数 N 和 wj. 对 于 m = 0,1,…,2v, 把 这 些 方程 看 作 是 一 个 从 任意 
的 正 态 变 基 的 n 元 组 (2-。,…,2") 到 (Y6,… ,YN) 的 线性 变换 . 这 个 变换 是 非 奇 
蜡 的 , 因此 两 个 N 元 组 的 协 方差 矩阵 相互 唯一 确定 , 我 们 业已 证 明 , 如 果 2; 的 协 
方差 矩阵 化 为 单位 阵 , 则 Yi 将 有 指定 的 协 方差 rn. 因此 , 反之 亦 然 ,存在 正 态 变 
基 2; 满足 定理 的 条 件 ， 并 使 (7.22) 对 n = 0,…, 成 立 . 但 是 , 这些 方程 的 两 边 
表示 随机 差分 方程 (7.13) 的 解 ， 并 且 因 为 它们 对 于 0 < n < N 是 一 致 的 ， 所 以 它 
们 必须 是 相等 的 . p> 
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3.8 ”马尔 可 夫 正 态 密度 


我 们 再 来 讨论 产生 于 马尔 可 夫 过 程 中 的 一 类 特殊 正 态 密度 . 不 失 一 般 性 ,我 们 
只 考虑 中 心 在 原点 的 密度 ， 则 E(Xk) = 0. 我 们 利用 通常 的 缩写 记号 


BE(XR) = of, E(XiXk) = ojokpj,. (8.1) 


pis 是 相关 系数 , 且 pkk = 1. 

定义 (Xi,…,Xr+) 的 7 维 正 态 密度 是 马尔 可 夫 密 度 ， 如 果 对 于 大 < 7， 在 给 定 

X1,… ,Xk-1 下 Xk 的 条 件 密度 ,与 在 给 定 Xk_1 下 Xk 的 条 件 密度 相等 . 
粗略 地 讲 , 如 果 我 们 知道 Xk_1(“ 现 在 ”), 那么 “过 去 ”Xi，,…, Xk-2 的 附加 知 

识 并 不 提供 有 关 “ 将 来 ”" 的 任何 信息 , 即 不 提供 有 关 X; 的 任何 信息 , 这 里 了 > 大 . 
通常 在 类 似 的 情形 下 , 我 们 把 马尔 可 夫 这 一 术语 可 交换 地 应 用 于 (Xi,…,X;) 

及 其 密度 . 

定理 1 为 使 (X1,…,Xr) 是 马尔 可 夫 序 列 , 下 列 两 个 条 件 中 的 每 一 个 都 是 充分 必 

要 条 件 : 


(人 对 于 大 和 mm 
E(Xk|X1,:*, Xk-1) = E(Xk|Xk-1); (8.2) 
(地 对 于 j<v<k<r, 
Pix = PisPons (8.3) 
即 为 使 (8.3) 成 立 ， 只 
Pin = Pjk-lpk-Lk( < Kk). (8.4) 


证 密度 的 恒 等 蕴含 期 望 的 相等 , 所 以 (8.2) 显然 是 必要 的 . 另 一 方面 , 如 果 (8.2) 
成 立 ， 那 么 3.6 节 定 理 5 说 明 ， 在 给 定 X1,…, Xk-1 下 Xk 的 条 件 密度 只 依赖 
于 Xk-1， 而 不 依赖 于 前 面 的 变 其 . 因为 在 给 定 X:-! 下 Xk 的 条 件 密度 由 对 变量 
X11，… ,Xk-2 进行 积分 得 出 的 ， 所 以 两 个 条 件 密度 是 恒 等 的 . 于 是 (8.2) 式 是 充分 
必要 条 件 . 

再 借助 于 3.6 节 定 理 5, 显然 变量 


T= X;— E(Xk|Xk-1) (8.5) 


和 变量 
m= Ki 
T=X a Pk—LEXE-1 (8.6) 
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是 恒 等 的 ， 因 为 这 只 是 一 个 与 X-1 不 相关 的 形 如 Xi 一 cXk-1 的 变量 . 因而 根据 
同一 定理 , 为 使 (8.2) 式 成 立 , 当 上 且 仅 当 了 也 与 Xi,… ,Xk-2 不 相关 , 即 当 且 仅 当 
(8.4) 式 成 立 . 因此 (8.4) 式 是 充分 必要 条 件 . 其 实 (8.4) 式 是 (8.3) 式 的 特殊 情形 ， 
因此 (8.3) 式 的 条 件 是 充分 的 . 它 也 是 必要 的 , 因为 (8.4) 式 的 重复 应 用 表明 , 对 于 
j<v<kgr, 
jk j,k—l 大 一 2 jv 
pe ob pp pl (en 
因而 (8.4) 列 含 (8.3). 
系 如果 (XI1，…,Xr) 是 马尔 可 夫 序 列 ， 那么 满足 al < aa < …' < ao <7 的 每 个 
子 集 (Xa,，…，Xa,) 也 是 马尔 可 夫 序 列 . 
这 是 显然 的 . 因为 (8.3) 式 可 自动 地 推广 到 一 切 子 集 . 
例 (a) “独立 增 量 . 满足 E(Xk) = 0 的 正 态 随机 变量 的 (有 穷 或 无 穷 ) 序列 {Xk] 称 
为 具有 独立 增 其 的 过 程 ， 如 果 对 于 j < k, 增 基 Xk 一 X; 是 与 (X1,…,Xi) 独立 的 . 
特别 地 , 这 蕴含 
E(Xj(Xk — Xi)) =0 
或 


oj 站 
pi = a j<k. (8.8) 


把 这 式 与 (8.3) 式 比较 , 我 们 看 出 , 具有 独立 增 量 的 正 态 过 程 自动 地 是 马尔 可 夫 过 
程 . 它 的 构造 比较 简单 :Xk 是 下 列 个 相互 独立 的 正 态 变 量 的 和 ， 

X1, X2 — Xi Kk — Xk 
例 (b) ” 自 回归 模型 . 考虑 具有 E(Xk) = 0 的 正 态 马尔 可 夫 序列 XX1,X2,…. 存在 


唯一 的 一 个 常数 ak, 使 得 Xk 一 akXk-1 与 Xk-1 独立 , 从 而 与 Xi，…， Xk-1 独立 . 
令 


= Var(Xk — akXk1), 


递 推 地 有 
Xi = AZ1, 


Xk = QEXk-1 + MZk, Kk = 2,3,.+*. (8.9) 
容易 看 出 , 这 样 定义 的 变量 Zi 是 独立 的 , 并 且 


E(2Zk)=0, E(2Z2) = 1 : (8.10) 
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反之 亦 然 , 如 果 Zi 是 正 态 的 且 满 足 (8.10), 则 (8.9) 确定 了 序列 {Xn}，(8.9) 的 实 
际 构造 表明 {Xa} 是 马尔 可 夫 序 列 . 作为 练习 , 我 们 用 计算 来 验证 它 . 将 (8.9) 乘 以 
X; 并 取 期 望 . 当 Zi 与 六 ,Xk-1 独立 时 , 对 于 了 < 大 我 们 得 到 
_OK _Pik ， 
OK 一 1 Pj,k—1 


ak= 


(8.11) 


于 是 (8.4) 是 此 式 的 简单 推论 . 我 们 知道 , 它 蕴含 Xx 的 马尔 可 夫 特 性 . 因此 ,(X1,…， 
Xr) 是 马尔 可 夫 序 列 ， 当 且 仅 当 形 如 (8.9) 的 关系 式 对 于 满足 (8.10) 的 正 态 变量 
如 成 立 [这 是 3.7 节 例 (b) 的 特殊 情形 ]. 
至 此 我 们 只 考虑 了 有 穷 序 列 (X1,…,X+), 但 是 数 > 不 起 作用 ， 我 们 同样 可 
以 谈 到 无 穷 序 列 {Xn}， 这 并 不 包含 无 穷 序列 空间 或 任何 新 的 理论 ， 而 只 是 指出 
(XU,… ,Xr) 的 分 布 对 一 切 > 都 是 确定 的 . 类 似 地 ， 当 任 一 有 穷 序 列 Xl = 
X(t1),…,Xr = X(tr) 是 马尔 可 夫 序 列 时 我 们 谈 到 马尔 可 夫 族 {X(t)}. 这 种 描述 
依赖 于 函数 
E(X?(t)) = 0?(t), ECX(s)X(D) = oa(s)o(t)p(s,t). (8.12) 
由 (8.3), 显然 ,一 个 族 是 马尔 可 夫 族 , 当 且 仅 当 对 于 s < t < T， 


pls,t)plt, 7) = p(s, 7). (8.13) 


不 管 怎么 说 , 我 们 实际 上 只 讨论 具有 满足 (8.13) 的 协 方差 的 有 穷 维 正 态 分 布 族 . 
和 3.7 节 开始 比较 详细 阐明 的 一 样 , 序列 {Xa} 是 平稳 的 ， 如 果 对 于 每 个 固定 
的 nn 元 组 (Qi1,…, an), (Xay+v，…，Xan+v) 的 分 布 与 v 无 关 . 这 样 的 序列 的 有 穷 截 
口 可 以 扩展 到 两 边 ， 从 而 自然 的 仅 考虑 双边 无 穷 序 列 {…， XX_2,X_1, Xo, XL，…}. 
这 些 记号 很 明显 地 可 搬 用 到 族 {X(t)} 上 . 
对 于 平稳 序列 {Xn}, 方差 o2 与 无 关 . 在 马尔 可 夫 的 情形 , (8.3) 式 殖 含 pj = 
眙 让 因此 ,对 于 平稳 马尔 可 夫 序 列 ， 


E(XjXx) = o2pl*-il, (8.14) 
其 中 o2 与 p 都 是 常量 , |p| < 1. 反之 , 具有 满足 (8.14) 的 正 态 分 布 的 序列 是 马尔 
可 夫 平 稳 序 列 . 


在 平稳 族 {X(t)} 的 情形 , 相关 系数 p(s,t) 只 依赖 于 差 | 一 sj, 且 (8.13) 取 下 面 
的 形式 : 


plt)p(7) = p(t+7)， 对 于 ,7 >0. 
显然 , p(7) = 0 蕴含 对 于 所 有 的 t>7 有 plt) = 0, 又 有 


p (#7) =0. 
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从 而 p 可 以 不 为 0, 除非 对 于 所 有 的 上 > 0 有 p(t) = 0. 因此 , 根据 第 1 卷 17.6 
节 中 反复 利用 的 结果 , p(t) = eX. 因而 对 于 平稳 马尔 可 夫 族 . 


E(X(s)X(s +t)) = 02e*,t > 0. (8.15) 


除非 对 所 有 的 天 孔 X(s) 与 X(t) 是 不 相关 的 . 
例 (c) 平稳 序列 可 以 按照 上 例 的 方式 来 构造 . 由 (8.11) 式 , 我 们 应 当 有 


Xk = PXk-1+oOV1 ~ p22k: (8.16) 


对 于 每 一 个 ,可 以 把 Xk 表示 为 Zi, Zk-1,… ,Zk-v 和 Xk-v 的 线性 组 合 . 形式 上 
的 取 极限 可 以 得 到 用 独立 正 态 变 基 2; 的 双边 无 穷 序列 表示 {Xk} 的 表达 式 


Xr =oVI-P DpiZk-;, (8.17) 
j=0 


其 中 2; 由 (8.10) 所 正规 化 . 由 于 |p| < 1,， 所 以 级 数 的 收敛 性 似乎 可 能 的 , 但 是 像 
这 样 的 公式 包含 无 穷 序 列 空间 [ 见 关于 (7.5) 的 说 明 , (8.17) 是 它 的 特殊 情形 ]. 

讨论 定理 1 的 关系 式 对 于 用 密度 作 马 尔 可 夫 序 列 的 直接 描述 可 能 是 有 益 的 . 以 
9i 表示 Xi 的 密度 ，gir(z,y) 表示 在 给 定 X; = z 下 Xi 的 条 件 密度 在 y 处 的 值 (在 
随机 过 程 中 , gi 称 为 由 Xi; 到 Xi 的 转移 密度 ). 对 于 正 态 马尔 可 夫 序列 , g; 是 期 望 
为 0、 方差 为 of 的 正 态 密度 . 至 于 转移 概率 , 在 3.2 节 例 (a) 中 已 经 指出 


下 
ey hooded 2 


1 
gik(TY) = — 
ee OkV1— pix (SR 


其 中 表示 标准 正 态 密度 . 但 是 , 我 们 将 不 利用 这 个 结果 , 而 利用 独立 的 方法 来 分 
析 gi 的 性 质 . 我 们 照例 把 下 标 解释 为 时 间 参 数 . 

(Xi,Xi) 的 联合 密度 由 gt(z)g5(z,y) 给 出 。 (Xi, Xi Xk) 的 联合 密度 ， 是 
9gi(z)gi(z,y) 和 在 给 定 Xi 与 Xi 下 Xk 的 条 件 密度 的 乘积 ， 但 是 由 于 马尔 可 夫 
特性 , 如 果 i < j <k, 那么 指标 i 可 以 去 掉 , 并 且 (Xi,X;, Xi) 的 密度 由 下 式 给 出 ， 


(8.18) 


9i(zZ)gij(z,2)gjk(y 2). (8.19) 


在 马尔 可 夫 的 情形 , 每 个 n 元 组 (Xa,,…, Xa) 的 密度 由 形 如 (8.19) 的 乘积 给 出 ， 
但 是 密度 gj 不 能 任意 选择 . 实际 上 ， (8.19) 关于 y 的 积分 得 到 (Xi, Xk) 的 边缘 密 
度 , 因此 我 们 有 相 容 性 条 件 : 对 于 所 有 的 i < j <k， 


+o0 
gik(Z,2) = / gi(T, Vgik (Y, 2)dy. (8.20) 


3.9 习 题 87 


这 是 马尔 可 夫 过 程 的 查 普 曼 - 科 尔 莫 戈 罗 夫 (Clapman-Kolmogorov) 恒等式 的 特殊 
情形 .9 

粗略 地 说 ， 它 表示 由 时 刻 i 上 的 z 到 时 刻 大 上 的 z 的 转移 是 通过 任意 的 中 间 
位 置 y 而 发 生 的 , 由 y 到 z 的 转移 与 过 去 无 关 . 显然 , 对 于 任 一 满足 查 普 曼 - 科 尔 
莫 戈 罗 夫 恒 等 式 的 转移 概率 系统 gs, 乘法 格式 (8.19) 得 出 (Xi, XX2,…,X;) 的 相 容 
密度 系统 , 并且 序列 是 马尔 可 夫 序 列 , 因而 我 们 具有 定理 1 的 下 列 分 析 对 应 定理 ， 
定理 2 {gix} 可 以 作为 正太 马尔 可 夫 过 程 的 转移 密度 ， 当 且 仅 当 它 满足 查 普 蝎 一 
科 尔 莫 苇 罗 夫 恒等式 ， 并 且 对 于 每 个 国定 的 了 来 说 ,gik(z,2) 表示 在 3 处 的 正 态 密 
度 . 


两 个 定理 都 包含 必要 和 充分 的 条 件 ， 因 而 它们 在 某 种 意义 上 是 等 价 的 . 但 是 ， 
它们 具有 不 同 的 本 质 . 其 次 , 在 实际 上 并 不 局 限于 正 态 过 程 ; 应 用 于 族 {XI},， 它 
可 以 得 到 转移 概率 的 微分 和 积分 方程 . 因此 , 用 这 种 方法 可 以 引入 一 类 新 的 马尔 可 
夫 过 程 . 另 一 方面 , 由 定理 2 我 们 不 能 断定 gix 是 (8.18) 式 的 必要 条 件 ,结果 蕴含 
在 更 特殊 的 定理 1 中 . 

为 了 参考 和 以 后 的 比较 , 我 们 在 这 里 列举 两 个 最 重要 的 马尔 可 夫 族 {X(t)}. 

例 (d) 市 表 (Brown) 运动 或 维 纳 - 巴 舍利 耶 过 程 . 它 由 下 列 条 件 定义 : X(0) = 0， 
对 于 t > s, 变量 X(t) 一头 (s) 与 X(s) 独立 , XX(s) 具有 仅 依赖 于 t 一 s 的 方差 . 换 
名 话说 ， 这 个 过 程 有 独立 增 基 [ 例 (a)] 和 平稳 转移 概率 (但 它 不 是 平稳 过 程 ， 因为 
X(0) = 0). 显然 , E(X2(t)) = o?t, 并 且 对 于 s < t,E(X(s)X(t)) =o?s; 对 于 7 > 由 
由 (t,z) 到 (my) 的 转移 密度 是 正 态 的 , 具有 期 望 z 与 方差 cz(r 一 ). 它们 只 依赖 
于 (y 一 2)/(7 一 引 , 并 且 查 普 曼 - 科 尔 莫 戈 罗 夫 恒等式 化 为 卷 积 . 
例 (e) ”Urnstein-Uhlenbeck 过 程 . 这 个 过 程 指 的 是 具有 期 望 0 的 最 一 般 的 正 态 平 
稳 马尔 可 夫 过 程 . 它 的 协 方差 由 (8.15) 给 出 . 换 句 话说 , 对 于 7 > 由 (t,z) 到 (7,y) 
的 转移 密度 是 正 态 的 ,具有 期 望 exXr-9z 与 方差 o2(1 一 e207"). 当 T 一 00 时 ， 
期 望 趋 于 0, 方差 趋 于 o?. 乌 任 斯 坦 (Urnstein) 和 乌 伦 贝克 (Ublenbeck) 从 完全 不 
同 的 观点 考 虚 这 个 过 程 . 它 与 扩散 的 联系 将 在 10.4 节 中 讨论 


3.9 习 题 


1. 令 是 以 顶点 为 (0, 0), (1, 1), (0, 1/2), (1/2, 1) 的 四 边 形 和 顶点 为 (1/2, 0), (1, 0), (1, 
1/2) 的 三 角形 为 界限 的 (面积 为 1/2 的 ) 平面 区 域 (单位 正方 形 是 Q 与 关于 对 角 线 对 
称 于 9 的 区 域 的 并 集 ). 令 (X,Y) 在 9 中 是 均匀 分 布 的 . 试 证 边缘 分 布 是 均匀 的 , 并 


@ 另 一 特殊 情形 已 在 第 1 卷 15.13 节 (13.3) 和 17.9 节 (9.1) 中 过 到 . 注意 , 除了 求 和 代 若 了 积分 并 
且 只 考虑 平稳 转移 概率 以 外 ，(8.19) 是 第 1 卷 15.1 节 (1.1) 马尔 可 夫 链 的 概率 定义 的 类 似 定义 . 
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且 基 十 Y 有 相同 的 分 布 好像 X 和 Y 是 独立 的 ). @ 
提示 图 形 表明 计算 是 不 必要 的 . 


.具有 正 态 边 绰 密度 的 密度 . 令 u 是 直线 上 的 连续 奇 函 数 ， 在 -LI 外 等 于 0， 如 果 


lul < (2xe)-3, 则 
nz)n(y) + uz)u(y) 
表示 一 个 二 元 密度 , 它 不 是 正 态 的 , 但 它 的 边 红 密 度 却 都 是 正 态 的 尼 尔 生 (EE. Nelson). 


.第 2 个 例子 . 令 pl 和 pz 是 两 个 具有 单位 方差 , 但 不 同 相关 系数 的 二 元 正 态 密度 . 混 


合 密度 当 (P1 + po) 不 是 正太 的， 但 是 它 的 两 个 边沿 密度 与 n 一 致 
注 在 后 面 ， 所 有 的 随机 变量 部 在 Ri 中 . 随机 向 重用 对 偶 (Xi Xo) 表示 ,等 等 


. 令 XX，…, Xn 是 具有 相同 密度 f 和 分 布 函数 下 的 独立 随机 变量 , 如 果 X 是 其 中 最 小 


者 , Y 是 其 中 最 大 者 ， 则 对 偶 (X,Y) 的 联合 密度 由 下 式 给 出 ， 


n(n — DE) IFY) — Fo)]" ,yy > z. 


. 证明: R” 中 的 对 称 Cauchy 分 布 (在 (1.21) 中 定义 的 ) 相应 于 一 个 随机 向 量 , 它 的 长 


度 具 有 密度 v(r) = 4m 7r?(1+7?)?, 式 中 7 > 0( 提 示 : 利用 极 坐标 , 并 且 利用 (1.15) 
或 1.10 节 (10.4) 关于 射影 的 一 般 关 系 式 ). 


.对 于 柯 西 分 布 (1.21), 在 给 定 Xi, X2 下 Xs 的 条 件 密度 是 


ves) = 2. VTR+y 
(++ 
而 在 给 定 Xi = & 下 X2, Xs 的 二 元 条 件 密度 是 


1 1 十 全 


从 他 可 一 元 TT 


令 0<a<1, 并 且 对 于 z> 0,y > 0,f(z,y) = [1 +az)(L+ ay) - qje-=-o-eeo; 在 其 


他 地 方 , f(z,y) = 0. 
(a) 试 证 f 是 对 偶 (X,Y) 的 密度 ， 求 边缘 密度 和 分 布 函数 . 
(b) 求 条 件 密度 wz(y) 和 E(Y|X), Var(Y|X). 


. 令 了 是 集中 在 5 so 上 的 密度 , 设 对 于 z > 0,y > 0,u(z,y) = flz+3a)/z+ 切 ;在 其 他 


地 方 , u(z,y) = 0. 试 证 4 是 R? 中 的 密度 ,并 求 它 的 协 方差 矩阵 . 


, 令 X1, Xz, Xs 相互 独立 目 在 1 上 均匀 分 布 ， 令 Xo), Xe), XG) 是 相应 的 顺序 统计 


量 , 试 求 对 偶 


(外 部) 
XGa) Xs) 


的 密度 ,并 证 明 这 两 个 比 是 独立 的 . 试 推广 到 n 维 中 去 . 


@ 换 句 话说 ， 邵 使 变量 是 相关 的 ， 和 的 分 布 也 可 以 由 卷 积 给 出 这 个 直观 的 铺子 由 罗 宾 斯 (H. 已. 
Robbins) 提出 的 , 对 于 同一 类 型 的 另 一 不 同一 般 的 例子 可 见 2.4 节 (c). 
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10. 
3 


12. 


13. 
14. 


15. 


16, 
17. 


18. 


19. 


令 XX，X2,Xs 是 具有 相同 指数 分 布 的 独立 变量 . 试 求 (X2 一 X1, Xs 一 Xi1) 的 密度 . 

有 具有 单位 质量 的 质点 分 裂 成 2 个 具有 质量 X 和 1 一 X 的 碎片 . X 的 密度 f 集中 在 
1 上 , 由 对 称 性 , f(z) = f(1 一 z). 用 Xi 表示 较 小 的 碎片 ，X2 表示 较 大 的 碎片 . 这 
两 个 碎片 以 同样 的 方式 独立 地 分 裂 , 得 到 4 个 具有 质量 X11, X12, X21, Xzz 的 碎片 . 试 
求 : (a) X11 的 密度 ; (b) X11 和 X12 的 联合 密度 . 利用 (b) 来 验证 (a) 中 的 结果 . 


. 令 入 ,Xz2,… 是 独立 的 且 有 相同 的 正 态 密 度 n, Sk = Xi 十 … 十 Xk. 如 果 m <n, 试 


求 (Sm, 5") 的 联合 密度 及 在 给 定 Sn =t 下 Sm 的 条 件 密度 . 
在 上 题 中 , 试 求 在 给 定 X? 十 … 十 X2 下 X? 十 … 十 X% 的 条 件 密度 . 
令 (X,Y) 具有 中 心 在 原点 的 二 元 正 态 密度 , 并 且 E(X?) = E(Y?) =1,E(XY) =p. 在 
极 坐标 中 , (X,Y) 变 成 (R,9), 其 中 R? = X? + Y2. 试 证 9 密度 为 
Vi-P 


37(1 — 3psin pcos p)’ 
并 且 为 使 它 是 均匀 分 布 ， 当 且 仅 当 p = 0. 推出 


0<p<2n, 


P(XY >0} =3+a larcsinp 和 P{XY <0} =n Tarecosp. 


令 了 对 于 顶点 为 (0, 0), (0, 1), (1, 0) 的 三 角形 是 一 个 均匀 密度 , g 对 于 第 3 象限 内 的 
对 称 三 角形 是 一 个 均匀 密度 . 试 求 f* 了 和 了 * 9. 

注意 : 应 对 各 个 区 间作 令 人 乏味 的 分 别 考虑 . 

令 f 是 单位 加 上 的 均匀 密度 . 试 在 极 坐标 中 求 f* f. 

令 4 和 vw 是 在 R? 中 具有 下 列 形式 的 密度 : 


uz,y) = f(Vz +y), vz,y) = g(VT? + 2). 
试 在 极 坐标 中 求 uw*v. 


. 令 义 二 {Xi1,…,Xr} 有 7 维 正 态 密度 . 存在 一 个 单位 向 量 a = (a1,… ,ar), 使 得 对 于 


所 有 的 单位 向 量 c= (a1,… ,cr)， 
Var(alXi 十 … 十 arXr) > Var(ci Xi 十 .… 十 crXr). 
如 果 a = (1 0,……,0) 是 这 样 的 一 个 向 量 , 那么 Xi 与 其 余 的 X; 独立 
试 证 
定理 ”给 定 一 个 R" 中 的 正 态 密度 ， 那 么 坐标 轴 可 以 用 这 样 一 种 方法 来 旋转 ,使 得 新 
坐标 变量 是 相互 独立 的 正 态 变量 . 


换 句 话说 , 在 3.6 节 定理 2 中 , 矩阵 C 可 以 取 为 旋转 矩阵 . 
提示 : 令 Y = 针 C， 选择 这 样 的 旋转 矩阵 C, 使 得 


玫 一 aiXal 十 … 十 arXr， 


其 中 a = (a1,…,ar) 是 上 例 中 的 最 大 向 量 . 其 余部 分 是 容易 的 . 
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20. 试 求 满足 下 式 的 一 般 正 态 平稳 过 程 ， 
(a) Xntz + Xn =0, 
(b) Xn+2 — Xn = 0， 
(i 

21. 伺服 随机 过 程 米尔 斯 (H. D. Mins). 伺服 机 构 受到 随机 冲击 , 但 是 可 在 任何 时 间 引 入 校 
正 值 . 因此 , 在 时 间 ”的 误差 3 (在 适当 的 单位 下 ) 具有 形式 Ya = Ya 一 Cn + Xn+u 
其 中 Cn 是 校正 值 , Xm 是 独立 正 态 变量 , E(Xn ) = 0,E(X?) = 1. Cn 在 原则 上 是 过 去 
观测 值 的 任意 函数 ， 即 Ye 和 X( 对 于 上 < n) 的 任意 函数 .我们 希望 这 样 选 出 它们 ， 
使 Var(Ya)( 这 是 机 构 如 何 顺 利 工作 的 量度 ) 和 Var(Cn)( 这 是 机 构 如 何不 顺利 工作 的 量 
度 ) 极 小 . 
(a) 讨论 {Yn} 的 协 方差 函数 , 证 明 Var(yn) > 1. 
(b) 假设 Var(Cn) 一 Var(Y%) 一 上 7( 趋 向 平稳 ), 试 证 


o> eta 


(e) 特别 地 ,考虑 线性 配置 Cn = a 十 p(Yn -5),0 < p< 1, 求 协 方差 函数 及 区 的 形 如 
(7.8) 的 表示 式 . 


22，( 续 上 ). 如 果 在 信息 中 或 在 调节 中 有 时 清 , 则 除了 Cv 换 为 Cn+w 以 外 , 模型 在 本 质 上 
是 相同 的 . 讨论 这 种 情况 . 
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正如 引言 所 述 , 本 卷 很 少 用 到 测度 论 这 一 专门 的 工具 , 不 读本 章 也 能 阅读 本 书 
的 大 部 分 内 容 .但 我 还 是 简单 叙述 一 下 构成 本 书 理论 基础 的 基本 概念 , 并 且 为 便 
于 参考 引用 , 列 出 主要 的 定理 . 基本 的 思想 和 事实 并 不 难 理解 , 但 测度 论 的 证 明 依 
赖 于 复杂 的 技术 细节 . 对 于 初学 者 和 没有 专门 知识 的 人 来 说 , 测度 论 的 许多 方面 和 
应 用 也 可 能 引起 困难 ; 极 好 的 入 门 书 是 有 的 , 但 它们 必然 要 详细 论述 广泛 的 和 对 本 
书 来 说 是 不 重要 的 内 容 , 下 面 只 介绍 本 书 所 需要 的 内 容 , 省 略 了 许多 证 明和 技术 细 
节 @.， (公正 地 说 ,这 种 理论 的 简单 性 是 表面 的 ， 因 为 连续 时 间 参 数 随机 过 程 中 会 
出 现 相当 困难 的 测度 论 问题 , 条件 期 望 推迟 到 5.10 节 和 5.11 节 中 讨论 , 拉 东 - 尼 
科 迪 姆 (Radon-Nikodym) 定理 推迟 到 5.3 节 中 讨论 .) 

只 要 规定 2 是 (zt1,… ,zr) 的 简写 , 则 与 第 卡 儿 (Cartesian)( 或 欧 几 里 得 (Eu- 
clidean)) 空间 R7 有 关 的 公式 与 维 数 无 关 . 


4.1 贝尔 函数 


我 们 必须 选 定 一 类 可 以 定义 概率 的 集合 和 一 类 可 以 作为 随机 变量 的 函数 ， 这 
两 个 问题 不 仅 有 联系 , 而 且 它们 的 讨论 可 以 用 一 个 近代 的 概念 统一 起 来 . 我 们 从 引 
入 此 概率 和 回忆 用 单调 极限 表述 的 收敛 的 定义 开始 . 

集合 4 的 指示 函数 9 是 一 个 在 4 的 所 有 点 上 取 值 为 1, 而 在 4 的 余 集 4' 的 所 
有 点 上 取 值 为 0 的 函数 . 我 们 将 用 14 表示 它 , 于 是 当 ze 4 时 14(z) = 1, 而 在 其 
他 地 方 14(z) = 0. 每 个 集合 都 有 一 个 指示 函数 , 而 且 每 个 只 取 1 和 0 为 值 的 函数 


@ 这 对 热 悉 测 度 论 的 读者 及 只 对 结果 和 事实 感 兴趣 的 读者 都 合适 . 为 了 后 者 的 方便 , 我 们 将 在 5.1 节 
中 重 述 积 分 的 定义 . 除 此 之 外 , 他 们 可 以 依靠 自己 的 直观 想象 ,因为 测度 论 实际 上 证 明了 简单 的 形 
式 运算 是 正确 的 . 

@ 有 关 贝 尔 (Baire) 函数 和 勒 贝 格 - 斯 蒂 尔 切 斯 (Lebesge-Stieltjes) 积分 的 极 好 参考 书 是 ，E. J 
Mcshane and T. A. Botts, Real analysis, D. Van Nostrand, Princeton, 1959. 广泛 使 用 的 一 
般 测度 论 的 书 是 , P. R. Halmos, Measure Theory, D. Van Nostrand, Princeton, 1950, 和 N. 
Bourbaki, Eléments de mathématiguesllivre VL chapters 3—5]Hermann, Paris, 1952 和 1956. 
关于 概率 论 特殊 用 途 的 文献 可 参见 杜 布 (Doob)、 克 里 克 别 格 (Krickeberg)、 洛 埃 书 (Lo8ve)、 湿 
威 (Neveu) 以 及 享 涅 村 因 一 托 尔 特 拉 特 (Hennequin-Tortrat) 等 人 的 书 . 

@@ 这 个 术语 是 洛 埃 韦 (Losve) 引入 的 . 过 去 的 术语 “特征 函数 " 在 概率 论 中 容易 引起 混乱 . 
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必 是 某 个 集合 的 指示 函数 . 如 果 f 是 任意 一 个 函数 , 那么 乘积 14f 是 一 个 在 4 上 
等 于 f 而 在 其 他 地 方 等 于 0 的 函数 . 

现在 我 们 来 考虑 两 个 集合 的 交集 C = 4 门 B. 它 的 指示 函数 在 14 或 1 为 0 
时 等 于 0, 即 lc = inf(14,1s) 等 于 这 两 个 函数 中 的 较 小 者 . 为 了 利用 这 一 平行 关 
系 , 我 们 把 在 每 一 点 > 上 等 于 f(z) 和 g(z) 的 值 中 的 较 小 者 的 函数 记 为 了 门 9, 而 
不 记 为 inf(f,g). 类 似 地 , fUg = sup(f,9) 表示 二 者 中 较 大 者 9 算 子 站 和 了 U 分 别 
称 为 求 交 运算 和 求 并 运算 , 它们 适用 于 任意 个 数 的 函数 , 我 们 记 


及 人 N= 有 大， 户 U……U 记 = 站 庆 (GD 
k=1 k=1 


在 每 一 点 z, 这 些 函数 分 别 等 于 n 个 值 有 (z),…, 所 (z) 中 的 最 小 值 和 最 大 值 . 如 果 
所 是 集合 ht 的 指示 函数 , 那么 (1.1) 式 表示 交 生 门 … 门 4 和 并 A1U…U 4n 的 
指示 函数 . 

_。 现在 来 考虑 无 穷 序列 { 户 } (1.1) 式 中 定义 的 函数 单调 地 依赖 于 mw 因而 极限 
总 产 和 全 六 是 完全 确定 的 ， 但 可 能 是 无 穷 对 于 固定 的 记 


由 = 有 大 (12) 

kj 
是 单调 了 数列 及 门 … 门 +n 的 极限 ,序列 {wy} 本 身 也 是 单调 的 , 即 un = un U… 
Uw 利用 我 们 的 记号， ws。 一 wi. 根据 定义 ,un 是 数列 及 (z), fnsata) 的 


最 大 下 界 (下 确 界 ). 因而 wn 的 极限 和 liminf f 相同 , 于 是 


liminf fn = D Bn (1.3) 
lk 


这 样 ，lim inf 是 通过 两 次 取 单 调 序 列 的 极限 得 到 的 . 对 于 limsup fn, 我 们 只 需 把 
(1.3) 式 中 的 站 与 U 交换 一 下 . 

所 有 这 些 考虑 都 可 照搬 到 集合 上 去 . 特别 ,， 当 且 仅 当 14 = lim 14。 时 , 我 们 记 
4 = lim hn. 换 句 话说 , 当 且 仅 当 4 的 每 一 点 除 有 限 个 集合 外 属于 所 有 的 An, 余 集 
和 的 每 一 点 最 多 属于 有 限 个 An 时 , 集 列 {An} 收敛 到 4. 
例 (a) ”集合 {An io.}3. 作为 概率 论 中 集合 之 间 极 限 运算 的 重要 例子 ,我们 考虑 
一 个 事件 4, 它 定义 为 “在 给 定 的 事件 序列 41, 42,… 中 有 无 穷 多 个 事件 发 生 ” 特 
殊 情形 已 在 第 1 卷 8.3 节 ( 博 雷 尔 - 坎 泰利 (Borel Cantelli) 引 理 ) 和 第 1 卷 第 13 章 
(循环 事件 ) 中 考虑 过 ]. 更 正式 地 说 , 给 定 一 个 集合 序列 {4,}, 当 且 仅 当 z 属于 无 穷 


@ 许多 作者 建议 对 函数 用 符号 V 和 人 ,对 集合 用 符号 U 和 门 . 在 本 书 中 , 用 两 种 记号 没有 好 处 - 
Q@ “Ani. 0." 是 "An infinitely often" 的 缩写 , 读 作 “An 无 穷 多 次 发 生 ”, 一 一 译 者 注 
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多 个 hk 时 z 属于 4. 因为 0 和 1 是 指示 函数 仅 有 的 可 能 值 ， 所 以 这 个 定义 的 等 价 
说 法 为 14 = limsup 14。 因而 用 标准 的 记号 应 有 4 = limsup hn, 但 记号 {An i.0.} 
更 具有 启发 性 . 这 个 记号 应 归功 于 钟 开 莱 

我 们 的 下 一 个 问题 是 要 确定 R” 中 的 一 类 函数 9?， 以 后 我 们 将 讨论 这 类 函数 
任意 函数 的 概念 对 于 我 们 的 目的 来 说 太 广泛 ,因而 不 能 应 用 . 欧 拉 (Euler) 的 函数 
概念 的 现代 说 法 是 比较 合适 的 . 设 连续 函数 为 给 定 的 , 构造 新 函数 的 唯一 有 效 方法 
是 通过 取 极限 . 实际 上 , 只 要 我 们 知道 怎样 处 理 连续 函数 序列 {f} 的 极限 函数 , 或 
每 个 f 都 是 这 样 一 个 极限 的 函数 序列 {fn} 的 极限 函数 , 等 等 , 我 们 所 有 需要 就 都 
能 满足 . 换 句 话说 , 我 们 对 具有 下 列 性 质 的 函数 类 8 感 兴趣 : (1) 每 个 连续 函数 属 
于 多 ; (2) 如 果 户 , 户 ，… 属于 多 ,上 且 极 限 f(z) = lim fn(z) 对 一 切 z 都 存在 , 则 f 属 
于 多 , 称 这 类 函数 在 点 态 极限 下 封闭 . 毫 无 疑问 , 这样 的 函数 类 是 存在 的 ， 所 有 的 
函数 所 构成 的 类 就 是 这 样 一 个 函数 类 . 所 有 这 样 的 类 的 交 本 身 是 一 个 封闭 族 , 它 显 
然 是 这 样 的 类 中 的 最 小 者 . 我 们 只 考虑 这 个 最 小 类 . 

包含 一 切 连续 函数 的 最 小 封闭 函数 类 称 为 贝尔 类 ， 并 用 吧 表示 它 . 员 中 的 函 
数 称 为 贝尔 函数 , 了 

我 们 不 仅 对 定义 在 整个 空间 上 的 函数 , 而 且 对 只 定义 于 一 子 集 上 的 函数 (例如 
R2: 上 的 Vz 或 Inz) 利用 这 个 概念 . 

由 定义 易 知 ， 两 个 贝尔 函数 的 和 与 积 还 是 贝尔 函数 ， 这 对 多 个 函数 也 是 正确 
的 . 如 果 风 是 一 个 了 元 连续 函数 , 及 ,…, fr 是 贝尔 函数 , 那么 w( 甩 ,…, 所 ) 还 是 由 
尔 函 数 . 把 w 换 为 wn, 并 取 极 限 , 可 以 证 明 , 更 一 般 地 有 ,， 贝尔 溃 数 的 复合 函数 还 
是 贝尔 函数 固定 一 个 或 几 个 变量 的 值 后 得 到 的 函数 仍 是 贝尔 函数 , 等 等 . 简单 地 
说 , 在 贝尔 函数 类 中 经 初等 运算 得 到 的 函数 仍 属于 色 , 因而 是 我 们 分 析 的 一 个 自然 
对 象 . 事实 上 . 通过 考虑 更 小 的 类 , 不 可 能 起 到 简化 的 作用 . 


4.2 ”区间 函数 与 在 R” 上 的 积分 


我 们 将 利用 区 间 一 词 , 并 对 满足 下 列 4 种 双向 不 等 式 之 一 的 点 集 , 使 用 下 列 所 
表明 的 记号 : 


@ 原则 上 , 我 们 只 对 有 限 值 函数 感 兴 趣 , 但 为 方便 有 时 也 允许 取 土 oo 为 值 . 例如 , 每 个 单调 序列 都 有 
极限 这 个 简单 定理 , 对 有 限 值 函 数 是 成 立 的 , 而 且 若 没有 它 许多 系统 的 叙述 将 变 成 笔 抽 的 . 因此 , 我 
们 约定 ， 所 有 的 函数 的 值 域 可 扩展 到 整个 直线 上 , 即 它 们 可 取 土 oo 为 值 . 实际 上 , 值 土 oo 不 起 作 
用 . 为 了 使 两 个 函数 的 和 与 积 仍 为 函数 , 对 它们 的 值 , 我 们 约定 co 十 co = 00,00 一 00 = 0,00:00 = 
oo,0. co = 0, 等 等 

@ 这 个 定义 依赖 于 连续 性 的 概念 ， 而 不 依赖 于 笛 卡 儿 空间 的 其 他 性 质 . 因此 , 它 适用 于 任意 的 拓扑 空 
闻 . 
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tb:a<r<b, mb:a<z<b, 
bos<h, gb:a<r<b. 
在 一 维 中 , 这 包括 了 所 有 可 能 的 区 间 (包括 长 度 为 0 的 退化 区 间 在 内 ). 在 二 维 中 ， 
把 不 等 式 理解 为 各 个 坐标 分 量 的 不 等 式 , 诸 区 间 是 平行 于 坐标 轴 的 (可 能 是 退化 的 ) 
和 矩形. 其 他 的 部 分 闭 包 类 型 是 可 能 的 ,但 这 里 我 们 不 考虑 它们 . 把 a 或 "的 一 个 或 
几 个 坐标 换 为 士 co 的 极限 情形 是 允许 的 ; 特别 地 , 整个 空间 是 区 间 二 coysc. 
点 函数 f 对 单个 点 赋予 值 f(z). 集 函 数 已 对 集合 或 空间 的 区 域 赋予 值 . R3 中 
的 体积 、R? 中 的 面积 或 R' 中 的 长 度 都 是 典型 的 例子 . 但 还 有 很 多 的 例子 , 概率 是 
我 们 最 关心 的 一 种 特殊 情形 . 我 们 只 对 具有 下 列 性 质 的 集 函 数 感 兴趣 : 如 果 集 合 4 
被 分 成 两 个 集合 41 和 42, 那么 F{4} = F{A1} + F{42}. 这 样 的 函数 称 为 可 加 集 
函数 ,Q 
正如 我 们 所 看 到 的 那样 , 常常 会 发 生 这 样 的 情况 : 对 7 维 空间 R7 中 的 一 切 区 
间 都 定义 了 概率 F{7}, 我 们 希望 把 它 扩张 到 更 一 般 的 集合 上 去 . 在 初等 微 积 分 中 也 
有 同样 的 问题 ， 在 那里 面积 ( 容 度 ) 本 来 只 是 对 矩形 定义 的 ,我 们 希望 定义 更 一 般 
的 区 域 4 的 面积 . 最 简单 的 办 法 是 先 定义 二 元 函数 的 积分 , 然后 把 指示 函数 14( 即 
在 A 上 等 于 1 而 在 4 之 外 等 于 0 的 函数 ) 的 积分 看 成 “4 的 面积 ”. 同样 , 我 们 将 
定义 点 函数 v 关于 区 间 函 数 下 的 积分 


E(u) = 人 u(z)F {dr}. (2.1) 


然后 把 4 的 概率 定义 为 E(14). 在 积分 (2.1) 的 定义 中 , F 的 意义 不 起 作用 ,实际 
上 我 们 将 叙述 勒 贝 格 -斯 蒂 尔 切 斯 (Lebesgue-Stieltjes) 积分 的 一 般 概念 . 现在 我 们 
从 头 开始 研究 . 

设 王 是 一 个 对 每 个 区 间 了 赋予 有 限 值 F{T] 的 函数 . 这 样 的 函数 称 为 (有限 ) 可 
加 的 , 如 果 对 于 把 区 间 工分 成 有 限 多 个 不 相交 的 区 间 五 ……, 环 的 任 一 划分 ， 


F{T}= F{h} + + F{In}. (2.2) 


例 (a) 及: 中 的 分 布 . 在 第 1 卷 中 , 我 们 考虑 了 对 于 点 a1,42,… 赋 对 概率 p1,p2,… 
的 离散 概率 分 布 ， 这 里 F{I} 是 了 中 的 所 有 点 an 的 概率 pn 之 和 ， 并 且 E(u) = 
Dulan)pn. 
例 (b) 如果 G 是 任意 一 个 从 -co 为 0 增加 到 oo 为 1 的 单调 增 连 续 函 数 , 则 可 
以 定义 F{a,6} = G(b) 一 G(o). 
@ 可 加 集 子 数 的 实际 例子 是 质量 、 区 域 中 的 热量 、 土 地 价格 、 小 麦 调 数 、 一 个 地 区 的 居民 人 数 、 煤 的 
年 产量 、 一 个 时 期 中 乘客 飞行 里 数 或 消耗 的 千瓦 小 时 数 、 电 话 呼叫 次 数 等 . 
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例 (c)  R2 中 的 随机 向 量 . 具有 单位 长 度 的 向 量 从 原点 以 随机 的 方向 出 发 . 它 的 端 
点 位 于 一 个 二 维 区 间 工 中 的 概率 与 了 和 单位 圆 的 公共 部 分 成 正比 . 这 样 就 定义 了 一 
个 没有 密度 的 连续 概率 分 布 . 在 整个 概率 被 圆周 所 占有 这 个 意义 上 , 这 个 分 布 是 坷 
异 的 . 人 们 可 能 认为 , 这样 的 分 布 是 不 自然 的 ,应 该 把 圆周 而 不 是 平面 作为 样本 空 
间 . 反对 意见 是 站 不 脚 的 ,因为 两 个 独立 的 随机 向 量 之 和 的 长 度 可 取 0 和 2 之 间 的 
一 切 值 , 并 且 在 半径 为 2 的 圆 内 有 一 个 正 密度 [ 见 5.4 节 例 (e)]. 因此 , 对 一 些 涉 及 
随机 向 量 的 问题 ,自然 的 样本 空间 是 平面 . 总 之 , 我们 的 目的 是 用 简单 的 例子 来 说 
明 在 较 复 杂 的 情形 可 能 发 生 什么 情况 . 
例 (d) ”我 们 以 一 个 说 明 以 后 要 排除 的 可 能 性 的 例子 来 作为 结尾 . 在 Rt 中 , 对 于 
任 一 区 间 了 = a,b( 其 中 b< o%), 令 F{ 了 =0; 当 I= 古 55 时, 令 F{ 了 }=1. 这 个 
区 间 函 数 是 可 加 的 , 但 却 是 奇特 的 ， 因 为 它 违反 了 自然 的 连续 性 要 求 : 当 b 一 co 
时 , F{a,5b} 趋 于 Ff{a, oo0}. p 
最 后 一 例 表 明了 加 强 有 限 可 加 性 条 件 (2.2) 的 重要 性 . 我 们 将 称 一 个 区 间 函 数 
书 是 可 数 可 加 的 或 0 可 加 的 ， 如果 对 于 把 一 个 区 间 了 分 成 可 数 多 个 区 间 卫 , 12，… 
的 分 划 ， 都 有 


F{T = > FA (2.3) 
[“ 可 数 多 个 ”表示 有 限 多 个 或 可 列 多 个 . 术语 完全 可 加 与 可 数 可 加 是 同 义 的 . 在 最 
后 一 个 例子 中 , 条 件 (2.3) 显然 不 成 立 :] 

我 们 将 把 注意 力 完全 局 限于 可 数 可 加 集 函 数 ， 从 理论 上 已 证 明 这 种 做 法 是 正 

确 的 , 但 也 可 从 启发 性 的 角度 或 实际 的 角度 为 这 种 做 法 辩护 . 事实 上 ，, 如果 4n = 
五 U…U 是 前 n 个 区 间 的 并 集 ， 那么 An 一 二 人 们 可 以 论证 :“ 对 于 充分 大 
的 mw hn 与 了 实际 上 是 无 法 区 别 的 … 如 果 F{I} 可 用 试验 求 出 , 那么 , PF{An} 与 
{1} “实际 上 是 无 法 区 别 的 ”, 即 F{An} 应 当 趋 于 F{ 了 0}. 可 数 可 加 性 (2.3) 准确 地 
表达 了 这 个 要 求 . 
”由 于 我 们 只 对 概率 感 兴趣 ， 我 们 将 只 考虑 由 条 件 F{=55;55} = 1 所 正规 化 的 
非 负 区 间 函 数 F. 当 F{=coyvcs} < co 时 , 这 种 正规 化 并 没有 加 上 什么 严格 的 限制 ， 
但 这 种 正规 化 排除 了 像 Ri 中 的 长 度 和 R2 中 的 面积 这 样 的 区 间 函 数 . 为 了 在 这 种 
情形 下 利用 以 下 的 理论 ， 只 需 把 直线 或 平面 划分 为 单位 区 间 并 分 别 讨论 它们 就 行 
了 . 这 种 过 程 是 显然 的 且 为 大 家 所 熟知 , 因此 不 需要 进一步 说 明了 . 

R" 中 的 函数 称 为 阶梯 函数 ， 如 果 可 以 把 R7 分 成 有 限 多 个 区 间 ， 使 得 在 每 
个 区 间 上 此 函数 取 常 值 . 对 于 在 区 间 厂 ,…, I 上 分 别 取 值 a1,…,an( 即 具有 概率 
下 { 卫 },… ,FF{In}) 的 阶梯 函数 u, 类 似 于 离散 随机 变量 的 期 望 的 定义 , 我 们 令 

E(w = oF{N}+-…+anF{In}. (2.4) 


把 空间 分 成 区 间 使 得 在 每 个 区 间 上 w 取 常 值 的 划分 方法 是 不 唯一 的 , 但 和 离散 情 
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形 一 样 , 容易 看 出 定义 (2.4) 与 分 法 无 关 .] 这 个 期 望 E(w) 满足 下 列 条 件 : 
(a) 线性 组 合 的 可 加 性 : 


E(aiu + a2u2) = oiE(W) 十 azE(u2); (2.5) 


(b) 正 性 : 
4>0 蕴含 E(w) > 0; (2.6) 
(0) 正规 性 对 常数 函数 
E(1)=1. (2.7) 
最 后 两 个 条 件 等 价 于 中 值 定理 : a < u < 8 强 含 a < E(u) < 5, 因此 函数 E(w) 
表示 一 种 平均 值 .? 
问题 是 要 把 E(w) 的 定义 扩张 到 更 大 的 函数 类 上 去 , 且 保持 性 质 (a)~(c). 经 典 
的 黎 曼 (Riemann) 积分 利用 了 下 列 事实 : 对 于 0, 了 上 的 每 个 连续 函数 w， 存在 一 个 
阶梯 函数 列 un, 使 得 在 0, 了 上 一 致 地 有 tu 一 u. 于 是 由 定义 , E(w) = lim E(wn). 事 
实 上 ,收敛 的 一 致 性 是 不 必要 的 ; 当 wu 处 处 收敛 到 v 时 , 还 可 利用 E(w) 的 同一 
定义 . 因此 ,可 以 把 E(w) 扩张 到 所 有 有 界 贝尔 函数 上 去 , 并 且 这 种 扩张 是 唯一 的 . 
当 函 数 无 界 时 ， 积 分 的 发 散 是 不 可 避免 的 ， 但 至 少 对 于 正 的 贝尔 函数 ,可 把 E(w) 
定义 为 数 或 符号 oo( 表 示 发 散 ). 在 这 一 方面 不 会 产生 麻烦 , 因为 勒 贝 格 积分 理论 只 
考虑 绝对 可 积 性 . 粗略 地 说 , 从 简单 函数 的 期 望 的 定义 出 发 , 可 以 通过 明显 的 逼近 和 
极限 手续 来 对 一 般 的 贝尔 函数 定义 E(w). 这 样 定义 的 数 E(w) 是 以 关于 下 的 勒 贝 
格 -斯 蒂 尔 切 斯 (Lebesque-Stieltjes) 积分 . ( 当 基本 函数 下 保持 固定 从 而 不 会 发 生 
混淆 时 , 期 望 这 一 术语 是 更 可 取 的 .) 这 里 我 们 不 加 证 明 地 人 氢 述 9 勒 贝 格 理论 的 基本 
事实 , 它 的 性 质 和 范围 将 在 下 面 的 几 节 中 加 以 分 析 . [E(w) 的 构造 性 定义 将 在 4.4 节 
中 给 出 ] 
主要 定理 设 已 是 Rr 上 的 可 数 可 加 区 闻 画 数 ,并且 下 { 一 5oy55} = 1. 对 任 一 贝尔 
函数 类 存在 唯一 的 一 个 勒 贝 格 一 斯 芝 尔 切 斯 积分 E(u)， 使 得 : 如 果 久之 0, 则 E(u) 
是 一 个 非 负数 或 oo. 另外 ,为 使 E(w) 存在 ， 当 且 仅 当 卫 (u+) 或 了 E(u-) 有 限 . 在 这 
@ 当 下 表示 概率 时 ，B(u) 可 以 解释 为 一 个 可 能 赢得 数量 为 ol az,…… 的 赢 金 的 赌 徒 的 期 望 赢 金 额 . 
为 理解 其 他 情形 下 的 直观 意义 , 考虑 3 个 例子 , 其 中 u(z) 分 别 表示 在 时 刻 z 的 温度 , 在 时 刻 2 的 
电话 通话 次 数 , 质点 到 原点 的 距离 , 而 下 分 别 表示 时 间 区 间 的 长 度 , 一 个 时 间 区 间 内 的 电话 费 , 力 
学 中 的 质量 . 在 每 种 情况 下 ， 积 分 只 在 一 个 有 限 区 间 上 进行 , E(u) 将 表示 累积 “温度 小 时 "， 累 积 
赢 金 和 一 个 静 力矩 . 这 3 个 例子 表明 关于 任意 集 函 数 的 积分 比 黎 昌 (Riemann) 积分 更 简单 、 更 
直观 . 在 黎 曼 积分 中 , 独立 变量 起 着 不 止 一 种 作用 ,“ 曲 线 下 的 面积 " 对 初学 者 也 无 帮助 . 应 该 注意 ， 
期 望 的 概念 只 在 概率 论 中 出 现 . 


@ 证 明 方法 将 在 4.5 节 中 给 出 . 照例 , ut+ 和 表示 翌 的 正 部 和 负 部 , 即 u+ = uU0, 一 4 二 u 作 0. 
因此 , wu = wt 一 4 一 
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种 情形 下 , E(w) = E(ut) 一 E(u-). 函数 tu 称 为 是 可 积 的 ， 如 果 Elu) 是 有 限 的 , 于 
是 

(人 如 果 羡 是 一 个 阶梯 了 画 数 ， 则 E(u) 由 (2.4) 式 给 出 ; 

(i 条 件 (2.5)~(2.7) 对 所 有 的 可 积 醒 数 都 成 立 ; 

( 道 ) (单调 收敛 原理 ) 设 U1 < uz < … 一 其 中 un 是 可 积 的 ， 那么 E(un) 一 
E(w). 

变量 替换 vn = unt1 一 un 可 以 导致 最 后 一 个 原理 的 级 数 描述 : 

如 果 vn 可 积 , 且 vn 之 0, 则 


DE(w)=E (7 wn) (2.8) 


[在 两 边 都 有 意义 (有 限 ) 或 都 不 存在 的 意义 上 ] 成 立 ， 特 别 地 ， 由 此 推出 ， 如 果 
>u>0 且 Elu) = co, 则 也 有 E(v) = oo. 
如 果 在 ( 放 ) 中 把 单调 性 条 件 去 掉 , 那么 将 会 发 生 什 么 情况 ? 答案 依赖 于 一 个 有 
广泛 应 用 的 重要 引 理 . 
法 图 (Fatou) 引 理 ”如 果 wn >0 且 un 可 积 , 则 
E(lim inf un) < liminf E(wn). (2.9) 


特别 地 ， 如 果 un 一 局 则 liminf E(wun) > E(w). 
证 令 如 = 如 站 n+ 站 …, 于 是 wm < un, 从 而 
E(vn) < E(un). 
但 是 (正如 在 4.1 节 所 看 到 的 那样 ), vn 单调 地 趋 于 lim inf wun, 因此 E(wn) 趋 于 (2.9) 
式 的 左边 , 引 理 得 证 . [注意 , (2.9) 式 的 每 一 边 都 可 以 是 o0-] 
正如 将 在 例 (e) 中 说 明 的 那样 , 正 性 这 一 条 件 不 能 去 掉 , 但 可 以 换 为 一 个 形式 
上 较 习 的 条 件 : 存在 一 个 可 积 函 教 U, 使 得 un > U. (只 要 把 un 换 为 un 一 U 即 可 .) 
把 un 换 为 -un, 我 们 可 以 看 出 , 如 果 wn <U 且 E(w) < co, 则 
limsup E(wn) < E(limsupun). (2.10) 
对 于 收敛 序列 ，E(liminf un) = E(limsupun), 把 (2.9) 式 和 (2.10) 式 结合 起 来 就 得 
到 重要 的 . 
控制 收 剑 定理” 设 tm 可 积 且 tm 处 处 收敛 于 u. 如 果 存 在 一 个 可 积 的 U 使 得 对 所 
有 的 nn 有 |un| < U, 则 以 是 可 积 的, 且 了 (un) 一 E(w). 
在 勒 贝 格 理 论 中 只 有 一 个 这 样 的 地 方 ,在 那里 自然 的 形式 运算 可 能 导致 错误 
的 结果 ,上面 的 定理 就 与 这 个 地 方 有 关 . 条 件 lun| < U 的 必要 性 将 由 下 例 说 明 . 


例 (e) ”我 们 取 5,I 为 基本 区 间 , 并 用 通常 的 积分 (关于 长 度 的 积分 ) 来 定义 期 户 
洁 
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an(z) = (n+ 1)(n+2)z"(1— 2). 
这 些 函 数 处 处 趋 于 0, 但 是 却 有 1 = E(wn) 一 1. 把 un 换 为 -un, 可 以 看 出 , 法 图 不 
等 式 (2.9) 对 非 正 函数 不 一 定 成 立 . 
我 们 不 加 证 明 地 给 出 一 个 可 适用 于 更 一 般 情形 的 普通 微 积分 定理 . 
关于 累 次 积分 的 富 比 尼 (Fubini) 定理 ”如 果 雇 > 0 是 一 个 贝尔 函数 , 已 和 G 是 
概率 分 布 ， 则 


十 oa 十 co 
[reas {~ venctay 
A i 
二 了 Gf{dy} 人 uz, WF {dz}. (2.11) 


在 发 散 的 情形 按 通 常 的 办 法 解释 . 这 里 z 和 vy 可 以 解释 为 Rm 和 Rn 中 的 点 , 此 定 
理 蕴 含 了 如 下 的 断言 两 个 内 层 积分 都 是 贝尔 函数 . (此 定理 适用 于 任意 的 乘积 空 
间 , 在 4.6 节 将 给 出 此 定理 的 一 种 更 好 的 形式 .) 
平均 通 近 定 理 ”对 每 个 可 积 的 以 和 & > 0, 可 以 找到 一 个 阶梯 函数 v, 使 得 E(u 一 
v|) <e. 

除了 阶梯 函数 , 我 们 还 可 以 用 连续 函数 , 或 有 任意 多 阶 导数 且 在 某 一 有 限 区 间 
外 为 零 的 函数 来 通 近 . [ 试 与 8.3 节 中 的 通 近 定理 相 比 较 .] 
关于 记号 的 注 ”记号 E(w) 强调 对 4 的 依赖 性 , 在 区 间 函 数 下 是 固定 的 情况 下 , 这 
种 记号 是 实用 的 . 当 FF 可 变化 或 要 强调 对 FF 的 依赖 性 时 ,积分 记号 (2.1) 更 可 取 . 
它 也 适用 于 在 子 集 4 上 的 积分 , 因为 根据 定义 , u 在 4 上 的 积分 等 于 乘积 14u 在 
整个 空间 上 的 积分 . 我 们 记 


人/ u(z)P{dz} = E(14u) 
A 


(当然 要 假设 指示 函数 14 是 一 个 贝尔 函数 ). 两 边 表示 完全 相同 的 内 容 ， 左边 强调 
对 的 依赖 性 . 当 4 = a,6 是 一 个 区 间 时 ,通常 采用 记号 / ,但 要 想 表达 得 更 清 
楚 , 还 需 说 明 端 点 是 不 是 在 此 区 间 内 . 这 可 以 用 a+ 或 a- 来 表示 -. > 

按照 本 节 一 开始 所 述 的 程序 ,我们 现在 把 集合 4 的 概率 定义 为 E(14), 其 中 


14 是 一 个 贝尔 函数 ; 对 其 他 集合 , 不 定义 概率 . 我 们 将 在 更 一 般 的 样本 空间 中 讨论 
此 定义 的 推论 . 


4.3 og 代数 和 可 测 性 


在 离散 的 样本 空间 中 , 可 以 给 样本 空间 的 所 有 子 集 赋 概 , 但 一 般 来 说 这 既 不 可 
能 又 不 必要 . 在 前 几 章 中 ,我 们 考虑 了 欧 几 里 得 (Euclid) 空间 R7 这 一 特殊 情形 ， 


43 0o 代数 和 可 测 性 99 


而 且 我 们 是 从 对 所 有 的 区 间 赋 概 开始 的 . 在 上 一 节 中 业已 指出 , 可 以 以 自然 的 方式 
把 这 种 赋 概 扩张 到 一 个 更 大 的 集 类 4 上 . 这 集 类 的 主要 性 质 是 : 

(车 4 属于 入, 则 它 的 余 集 4 =E 一 4 也 属于 上 

(5) 若 {4n} 是 和 的 一 个 可 数 子 集 , 则 UAn 和 门 4 也 属于 处 

简单 地 说 , 共 是 这 样 一 个 系统 , 它 在 余 运 算 、 可 数 并 运算 、 可 数 交 运算 下 封闭 . 
正如 在 4.1 节 中 所 述 的 那样 , 这 还 蕴含 : 区 中 的 任 一 集 列 {4n} 的 上 .下限 仍 属于 鳞 
换 句 话说 , 对 中 的 集合 施行 任 一 种 熟知 的 运算 ,所 得 到 的 集合 都 不 会 跑 出 4 的 
范围 ,因此 我 们 没有 必要 考虑 其 他 的 集合 . 这 种 情况 是 典型 的 ， 因 为 一 般 说 来 ,我 
们 只 对 具有 性 质 (i) 和 (i) 的 集 类 赋 概 . 因此 ， 我 们 引入 下 面 的 适用 于 任意 空间 的 
定义 . 
定义 1 0 代数 9 是 一 给 定 集合 上 的 满足 性 质 (i) 和 (ii) 的 地 集 族 . 

对 区 的 任 一 给 定 的 子 集 族 省 包含 和 中 所 有 集合 的 最 小 o 代数 称 为 由 兴 产 生 
的 o 代数 . 

特别 地 ,由 Rr 中 的 区 间 产 生 的 集合 称 为 Rr 中 的 博 雷 尔 (Borel) 集 . 

由 4.1 节 贝尔 函数 的 定义 中 所 用 的 论证 可 知 , 包含 8 的 最 小 o 代数 是 存在 的 . 
注意 , © 是 任 一 集 4 和 它 的 余 集 的 并 , 每 个 o 代数 包含 空间 上. 
例 ”最 大 的 o 代数 是 < 的 所 有 子 集 构成 的 集 族 . 在 离散 空间 中 , 这 个 代数 是 可 用 
的 , 但 是 对 一 般 的 应 用 却 太 大 . 另 一 个 极端 情形 是 只 包含 整个 空间 和 空 集 的 平凡 代 
数 . 要 找 一 个 非 平凡 的 例子 , 我 们 考虑 直线 R! 上 具有 下 列 性 质 的 集合 : 如 果 ze A， 
则 所 有 点 z 土 lz 士 2… 都 属于 A( 周 期 集 ). 显然 , 所 有 这 样 的 集 族 构成 一 个 o 代 
数 . 

我 们 迄今 的 经 验 表明 , 概率 论 的 主要 研究 对 象 是 随机 变量 , 即 样本 空间 中 的 某 
些 函 数 ,我 们 希望 把 随机 变 基 X 与 分 布 函数 联系 起 来 ， 因 此 必须 使 事件 {X < 甘 
具有 概率 . 这 就 导致 了 : 
定义 2 设 引 是 由 蕊 的 集合 组 成 的 任 一 o 代数 . 称 区 上 的 孙 数 宙 为 红 可 测 的 中 ， 
如 果 对 每 个 了 由 所 有 使 uz) < 和 的 点 工 所 组 成 的 集合 都 属于 外 

因为 {z,u(z) < 村 = Ue: ulz) <t 一 nn 所 以 {z :ul(z) < 村 也 属于 红 因 
为 LL 在 余 运算 下 是 封闭 的 ， 所 以 在 上 面 的 定义 中 ， 可 以 将 符号 < 换 <,> 或 >. 

由 定义 可 知 , 在 4.1 节 所 述 的 意义 上 , 纪 可 测 函 数 构成 一 个 封闭 条, 

下 列 简单 引 理 是 常用 的 . 
”。。@ 把 ( 提 中 的 “可 数 ” 一 词 换 为 “有 限 ”， 可 类 似 地 定义 集 代数 ，o 代数 常 称 为 博 替 尔 (Borel) 代数 ， 

但 这 容易 和 定义 的 最 后 一 部 分 相 混淆 .在 定义 的 最 后 一 部 分 中 , 可 以 把 区 间 换 为 开 集 ， 从 而 此 定义 
适用 于 一 般 的 拓扑 空间 . 
@ 这 个 术语 是 不 恰当 的 ,因为 还 没有 定义 测度 . 
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引 理 1 ”函数 忌 是 其 可 测 的 充 要 条 件 为 ， 它 是 一 列 简单 函数 的 一 致 极限 . 所谓 函 
数 u 是 简单 函数 ,是 指 可 把 @ 分 成 可 数 多 个 集合 ,每 个 集合 都 属于 纪 且 了 在 每 个 
这 样 的 集 上 都 取 常 值 . 
证 ”由 定义 , 每 个 简单 函数 都 是 世 可 测 的 ; 由 于 所 有 的 妇 可 测 函 数 构成 一 封闭 系 ， 
所 以 简单 函数 列 的 极限 也 是 4 可 测 的 - 

反之 , 设 4 是 妇 可 测 的 .对 于 固定 的 e > 0, 定 义 An = {z:(n-l)e < wu(z) < ne}, 
这 里 -co < n < +oo. 集合 4 是 互 不 相交 的 , 而 且 它 们 的 并 是 整个 空间 G. 在 集 
An 上, 我 们 定义 ce(z) = (n 一 1)e,5e(z) = ne. 这样 我 们 就 得 到 两 个 定义 在 6 上 的 
函数 ce 和 5。, 并 且 在 所 有 的 点 上 ， 


Ce 和 usa，5c 一 Ce 一 


显然 , 当 e 一 0 时 , ce 和 5 都 一 致 地 趋 于 必 . [a 
引 理 2 在 Rr 中 ,贝尔 函数 类 和 关于 所 有 博 震 尔 集合 构成 的 og 代数 纪 可 测 的 注 
数 类 相等 . 
证 (a) 显然 , 每 个 连续 函数 都 是 博 雷 尔 可 测 的 . 由 于 博 雷 尔 可 测 函 数 构成 一 个 封 
闭 类 , 而 贝尔 函数 类 是 包含 所 有 连续 函数 的 最 小 封闭 类 , 所 以 每 一 个 贝尔 函数 都 是 
博 雷 尔 可 测 的 . 

(b) 上 一 引 理 表明 ,要 证 逆 命 题 ， 只 需 证 明 每 个 简单 的 博 雷 尔 可 测 函 数 都 是 由 
尔 函 数 就 行 了 . 这 等 价 于 如 下 的 断言 : 每 个 博 雷 尔 集 4 的 指示 函数 14 都 是 贝尔 函 
数 . 现在 可 以 这 样 定义 博 雷 尔 集 : 当 上 且 仅 当 4 的 指示 函数 14 属于 包含 所 有 区 间 的 
指示 函数 的 最 小 封闭 类 时 ,， 称 4 是 博 雷 尔 集 . 因为 贝尔 函数 类 是 一 个 包含 所 有 区 
和 间 的 指示 函数 的 封闭 类 9,， 所 以 每 个 博 雷 尔 集 4 的 指示 函数 14 都 是 贝尔 函数 . 

我 们 把 这 个 结果 应 用 于 欧 几 里 得 空间 R7. 在 4.2 节 中 ,我们 从 一 个 完全 可 加 
的 集 函 数 出 发 ， 对 于 其 指示 函数 14 是 贝尔 函数 的 集合 4, 定义 了 P{4} = E{14}. 
由 上 面 的 结果 可 知 ， 在 这 一 程序 下 ， 当 且 仅 当 4 是 博 雷 尔 集 时 ， 概 率 P{A} 有 定 
天 


用 区 间 来 通 近 博 雷 尔 集 。 由 上 面 最 后 一 个 断言 可 知 ，R” 中 的 概率 通常 是 定义 在 由 所 
有 博 雷 尔 集 构成 的 o 代数 上 的 , 因此 下 面 的 结果 是 有 意义 的 : 任 一 博 雪 尔 集 4 都 可 用 由 有 
限 个 区 间 组 成 的 集 妃 来 通 近 , 即 对 每 个 < > 0, 存在 一 个 集合 C, 使 得 P{C} < e 且 在 C 外 
集合 4 和 集合 B 相等 ( 即 余 集 C' 的 点 或 者 同时 属于 4 和 B, 或 者 既 不 属于 4 也 不 属于 
B. 我 们 可 以 把 C 取 为 4 一 4B 和 BB 一 AB 的 并 ). 


@ 为 证 这 一 点 , 对 开 区 间 f, 令 v 是 一 个 在 区 间 了 外 为 零 的 连续 函数 , 且 使 得 对 2 < 1,0 < v(z) < 1. 
那么 Wi 一 17- 
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证 由 42 人 存在 一 个 阶梯 函数 v > 0, 使 得 E(|14 -ul) < 站 设 B 是 


所 有 使 v(z) > 3 的 点 z 构成 的 集合 . 因为 v 是 阶梯 函数 , 所 以 B 由 有 限 多 个 区 向 组 成 容 
易 验证 ， 对 于 所 有 的 T， 


El14(z) 一 1s(z)| < 2El14(z) — v(z)| <e. 


设 C 是 所 有 属于 4 或 B 但 不 同时 属于 4 和 B 的 点 组 成 的 集合 ， 则 它 的 指示 函数 是 
114 一 1a|. 上 面 的 不 等 式 说 明 P{C} < e 结论 证 毕 . p 
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我 们 现在 可 以 叙述 概率 中 所 用 的 一 般 体 系 了 . 不 管 样本 空间 6 如 何 , 我 们 只 对 
适当 的 o 代数 勾 中 的 集合 赋 概 . 因此 , 先 给 出 下 面 的 : 
定义 1 殊 的 某 些 子 集 构成 的 o 代数 芒 上 的 概率 测度 P 是 这 样 一 个 函数， 它 赋 予 
处 中 的 每 个 集 4 一 数值 P{4} > 0, 使 得 P{C} = 1, 并 对 处 中 任意 可 数 个 互 不 相交 
的 集合 An， 
P{UAn} = DP{An}. (4.1) 
这 个 性 质 称 为 完全 可 加 性 ， 概 率 测度 可 以 描述 为 4 上 的 一 个 满足 正规 化 条 
件 PP{E} = 1 的 完全 可 加 非 负 集 函数 . 
在 具体 的 情况 下 ,必须 选择 适当 的 o 代数 , 然后 在 它 上 面 构造 概率 测度 . 构造 
的 方法 随 情况 而 变化 , 不 可 能 找到 一 个 一 般 的 方法 . 通常 可 以 类 似 于 4.2 节 中 在 Rr 
中 的 博 雷 尔 集 上 构造 概率 测度 的 方法 进行 构造 . 典型 的 例子 是 由 独立 随机 变量 序列 
提供 的 (4.6 节 ). 任何 一 个 概率 问题 的 起 点 都 是 这 样 一 个 样本 空间 , 在 其 中 已 经 选 出 
了 一 个 带 有 适当 的 概率 测度 的 o 代数 . 这 就 导致 了 : 
定义 2 ”概率 空间 是 由 样本 空间 C,E 中 的 某 些 集 组 成 的 一 个 og 代数 册 和 其 上 的 
一 个 概率 测度 也 构成 的 三 元 组 (C, 册 P). 
诚然 , 不 是 每 一 个 可 以 想象 得 到 的 概率 空间 都 是 有 价值 的 研究 对 象 , 但 是 定义 
包含 了 为 仿照 第 1 卷 的 样子 建立 理论 所 需要 的 一 切 东西 ， 而 且 事 先 讨论 可 能 在 实 
际 中 出 现 的 概率 空间 的 类 型 是 没有 什么 用 处 的 . 
随机 变 其 是 样本 空间 中 的 函数 , 但 为 了 概率 论 的 目的 , 我 们 只 能 使 用 能 够 定义 
分 布 函数 的 函数 , 4.3 节 的 定义 2 就 是 为 了 处 理 这 种 情况 而 引入 的 , 它 导致 了 : 
@ 条 件 P{C} = 1 只 起 正规 化 的 作用 ,如果 把 它 换 为 P{C} < oo, 不 会 发 生 什么 本 质 的 变化. 在 这 
种 情况 下 ， 我 们 称 之 为 有 限 测度 . 在 概率 论 中 , P{C} < 1 的 情况 常常 发 生 , 在 这 种 情况 下 ,我 们 


称 之 为 亏 捐 概 率 测度 . 甚至 条 件 P{E@C} < oo 也 可 以 减弱 为 : @ 可 以 分 成 可 数 多 个 互 不 相交 的 部 分 
En, 使 得 P{Cn} < oo. (长度 和 面积 是 典型 的 例子 , ) 这 时 ,我 们 称 之 为 c 有 限 测度 . 
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定义 3 ”随机 变量 全 是 关于 基本 o 代数 红 可 测 的 实 夯 数 . 由 Fr) = P{X < 7} 
定义 的 函数 下 称 为 X 的 分 布 画 数 . 

排除 不 是 随机 变量 的 函数 是 可 以 做 得 到 的 , 因为 我 们 马上 就 会 看 到 , 所 有 通常 
的 运算 , 如 求 和 、 取 极限 等 , 都 可 在 随机 变量 类 中 进行. 在 详细 叙述 这 个 问题 之 前 ， 
我 们 先 说 明 , 随机 变量 X 以 这 样 的 方式 把 样本 空间 e 映射 到 实 直线 R! 上 , 使 得 
中 的 集合 {z :a < X(z) < 中 被 映 成 区 间 a,5, 并 令 we 的 概率 为 F(b) 一 下 (a). 这 
样 , Ri 中 的 每 个 区 间 了 都 有 一 个 概率 F{ 了 }. 代替 区 间 7, 我 们 可 以 取 Ri 中 的 任 一 
博 雷 尔 集 P， 并 考虑 e 中 的 这 样 的 点 z 组 成 的 集 4, 使 得 X(z) 属于 了 . 用 符号 表 
示 就 是 : 4 = {X eT}. 显然 ,所 有 这 样 的 集合 所 构成 的 集 族 是 一 个 o 代数 5h, 
可 能 和 刀 相 等 ,但 是 i 通常 比 刀 小 . 我 们 称 如 是 由 随机 变量 X 产生 的 o 代数 . 
可 以 把 它 称 为 E 中 的 使 X 关于 其 为 可 测 的 最 小 o 代数 . 随机 变量 X 把 sl 中 的 每 
个 集合 4 映射 为 Ri 中 的 博 雷 尔 集合 ,因此 关系 式 F{T} = P{4} 在 Ri 中 的 所 
有 博 备 尔 集合 构成 的 o 代数 上 唯一 地 定义 了 一 个 概率 测度 . 对 于 区 间 了 = a,b, 我 们 
有 FP{1} = FP(b) -F(a), 因此 F 与 按 4.2 节 中 所 述 的 方法 由 分 布 函 数 下 在 Ri 中 定 
义 的 唯一 的 概率 测度 相等 

这 个 讨论 表明 , 只 要 我 们 只 关心 一 个 特殊 的 随机 变量 X, 我 们 就 可 以 不 考虑 原 
来 的 样本 空间 , 而 考虑 概率 空间 (Ri, 双 ,P), 其 中 8 是 Ri 中 的 所 有 博 雷 尔 集 构 成 
的 o 代数 , P 是 由 分 布 函数 导出 的 测度 . 我 们 已 经 知道 , 在 Ri 中 贝尔 函数 类 与 
博 雷 尔 可 测 函数 类 相等 . 取 Ri 为 样本 空间 , 这 就 意味 着 随机 变量 类 与 博 雷 尔 函数 
类 相等 . 在 原来 的 样本 空间 中 解释 ， 这 就 意味 着 随机 变量 X 的 所 有 贝尔 函数 所 成 
的 类 ,与 所 有 关于 由 X 产生 的 o 代数 0 可 测 的 函数 所 成 的 类 相等 . 因为 Lc 4 
所 以 这 理 含 X 的 任 一 贝尔 函数 还 是 随机 变量. 

这 个 论证 可 以 照搬 到 有 限 个 随机 变量 所 成 的 集合 上 . 于 是 7 元 组 (X1,…,X) 
把 E 映 到 Rr 中 , 使 得 对 于 Rr 中 的 每 个 开 区 间 , 在 © 中 有 一 个 形 如 {ak < Xi < 
brs = 1,…,7} 的 集合 与 之 对 应 . 这 个 集合 是 并 可 测 的 ,因为 它 是 7 个 由 可 测 集 
的 交集 . 与 一 个 变量 的 情形 一 样 ,我 们 可 以 把 由 X1,…,X, 产生 的 o 代数 如 定义 
为 上 中 的 使 得 上 述 r 个 变量 关于 其 为 可 测 的 最 小 o 代数 . 于 是 我 们 有 基本 的 ， 
定理 ”任何 有 限 个 随机 变量 的 贝尔 函数 还 是 随机 变量 . 

如 果 随 机 变量 U 关于 由 X1,…,X, 产生 的 o 代数 是 可 测 的 ， 则 它 是 X1,…， 
Xr 的 贝尔 函数 . 
例 (a) ”在 以 X 作为 坐标 变量 的 直线 Ri 上 ， 函数 X? 产生 一 个 由 关于 原点 对 称 
的 博 雷 尔 集合 组 成 的 o 代数 (所 谓 4 关于 原点 对 称 ， 是 指 : 如 果 z & 4， 则 也 有 
—z € A). 
例 (b) ”考虑 以 X1, Xz, Xs 为 坐标 变量 的 R3 和 所 有 博 雷 尔 集合 构成 的 o 代数 . 对 
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偶 (X1,X2) 产生 一 个 由 所 有 这 样 的 柱 集 所 成 的 族 , 它们 的 母线 平行 于 第 3 个 轴 , 底 
是 (X1,X2) 平面 上 的 博 雷 尔 集 . 

期 望 

在 4.2 节 中 我 们 从 R" 中 的 一 个 区 间 函 数 出 发 , 并 利用 它 构造 了 一 个 概率 空间 . 
在 那里 我 们 看 到 ， 先 定义 函数 的 期 望 (积分 ), 然后 定义 博 雷 尔 集 4 的 概率 等 于 其 
指示 函数 的 期 望 B(14) 是 比较 方便 的 . 如 果 我 们 从 一 个 概率 空间 出 发 , 那么 程序 就 
得 倒转 过 来 : 概率 是 给 定 的 , 必须 通过 给 定 的 概率 来 定义 随机 变量 的 期 望 . 幸好 这 
个 程序 是 非常 简单 的 . 

同 4.3 节 中 一 样 ,我们 称 随机 变量 UV 是 简单 的 ， 如 果 可 以 把 样本 空间 分 成 可 
数 多 个 不 相交 的 部 分 A1, 42,…, 使 得 每 一 个 4; 都 属于 基本 c 代数 4 且 UU 在 A; 
上 取 常 值 aj. 对 这 样 的 随机 变量 , 可 以 应 用 第 1 卷 的 离散 理论 ,只 要 下 列 级 数 绝对 
收敛 , 我 们 就 把 U 的 期 望 定义 为 


E(U) = DaxrP{Ax}; (4.2) 
当 上 述 级 数 不 绝 对 收敛 时 ,我 们 说 U 的 期 望 不 存在 . 

对 于 任 一 随机 变量 和 任 一 。 > 0, 我 们 在 (3.1) 式 中 定义 了 两 个 简单 随机 变 基 
ae 和 6。, 使 得 5。 =g。+e 且 oc<U<5. 对 于 E(U) 的 任 一 合理 的 定义 , 当 变量 
ce 和 5e 有 期 望 时 , 我 们 应 当 有 

E(g.) < E(V) < E(5.). (4.3) 
因为 ce 和 5 只 相差 。， 所 以 或 者 它们 的 期 望 也 相差 。, 或 者 它们 的 期 望都 不 存在 . 
在 后 一 种 情况 下 ， 我 们 说 U 的 期 望 不 存在 ， 而 在 前 一 种 情况 下 ,在 (4.3) 式 中 令 
e 一 0, 就 可 唯一 地 确定 EB(U). 简单 地 说 , 因为 每 一 个 随机 变量 U 都 是 一 列 简单 随 
机 变量 on 的 一 致 极限 ,所 以 UV 的 期 望 可 以 定义 为 E(on) 的 极限 . 例如 ,利用 5。， 
只 要 (对 某 一 个 e > 0, 从 而 对 所 有 的 。> 0) 下 列 级 数 收敛, 则 我 们 有 


E(D) = lm Yn EP{(n—l)e<U <ne}. (4.4) 

(4.4) 中 出 现 的 概率 和 U 的 分 布 函数 玉 赋予 区 间 (n 一 1)e,ne 的 概率 相等 . 因此 , 借 
助 于 这 种 记号 的 变化 , E(U) 的 定义 化 为 4.2 节 中 的 定义 

E(U) = / tF{dt}. (4.5) 


因此 ， 在 原来 的 概率 空间 中 定义 的 E(V) 和 通过 分 布 函 数 定义 的 E(U) 是 一 致 的 . 
(在 第 1 卷 第 9 章 中 对 离散 变量 作 了 同样 的 说 明 .) 所 以 , 没有 必要 强调 任意 概率 空 
间 中 的 期 望 具有 4.2 节 所 讨论 的 R" 中 的 期 望 的 基本 性 质 . 
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4.5 扩张 定理 


构造 概率 空间 的 通常 起 点 是 先 在 较 小 的 集 类 上 定义 了 概率 ， 需 要 把 定义 域 适 
当地 扩大 . 例如 , 在 第 1 卷 中 讨论 无 穷 试验 序列 和 循环 事件 时 ,我 们 只 知道 所 有 的 
依赖 于 有 限 多 次 试验 的 事件 的 概率 , 但 必须 把 这 个 定义 域 扩大 , 使 之 包括 像 输 光 、 
循环 和 最 终 灭亡 那样 的 事件 . 再 如 ， 在 4.2 节 中 构造 R7 中 的 测度 时 , 我 们 是 从 定 
义 在 所 有 区 间 上 的 概率 F{7} 出 发 的 , 这 个 定义 被 扩张 成 了 所 有 博 雷 尔 集 所 成 的 类 . 
这 种 扩张 的 可 能 性 应 归功 于 一 个 有 广泛 适用 性 的 定理 , 许多 概率 空间 的 构造 都 依赖 
于 它 . 程序 如 下 . 

五 的 可 加 性 允许 我 们 对 每 一 个 可 以 写成 有 限 多 个 互 不 相交 的 区 间 I 的 并 的 集 
4 明确 地 定义 


F{A} = > FAT- (5.1) 


所 有 形 如 上 面 的 4 的 集合 构成 一 个 代数 to( 即 ilo 中 有 限 多 个 集合 的 并 、 交 、 余 集 
仍然 属于 so) 此 后 , 基本 空间 Rr 的 性 质 就 不 起 作用 了 , 我 们 可 以 考虑 任意 一 个 空 
间 E 中 的 任意 一 个 集 代数 to. 总 存在 一 个 包含 ilo 且 在 可 数 并 和 可 数 交 运算 下 封 
闭 的 最 小 代数 外 换 句 话说 , 总 存在 一 个 包含 ilo 的 最 小 o 代数 区 见 4.3 节 的 定义 
1). 在 R7 中 构造 测度 时 , o 代数 区 和 所 有 博 雷 尔 集 所 构成 的 o 代数 相等 . 把 概率 
的 定义 域 从 tlo 扩张 为 苹 是 根据 一 般 的 ， 
扩张 定理 ” 设 lo 是 某 一 空间 @ 中 的 集 代数 . 设 已 是 定义 在 Ho 上 的 一 个 集 函 数 ， 
使 得 对 每 个 集合 AE 4lo 都 有 {A} > 0,F{C} =1, 而 且 当 把 4 任意 地 分 成 可 数 多 
个 互 不 相交 的 集 及 € tlo 时 (5.1) 式 都 成 立 ， 则 玉 可 以 唯一 地 扩张 成 为 包含 to 的 
最 小 a 代数 勾 上 的 一 个 可 数 可 加 集 函 数 ( 即 一 个 概率 测度 ). 

我 们 将 在 下 节 中 给 出 此 定理 的 一 种 典型 的 应 用 . 这 里 我 们 给 出 扩张 定理 的 一 个 
更 一 般 更 灵活 的 形式 , 这 种 形式 与 4.2 节 和 4.3 节 中 的 讨论 比较 一 致 . 我 们 是 从 阶 
梯 函 数 的 期 望 (2.4) 出 发 的 . 然后 把 这 个 期 望 的 定义 域 从 有 限 的 阶梯 函数 类 扩张 成 
较 大 的 有 界 贝尔 函数 类 . 这 种 扩张 直接 导致 了 勒 贝 格 - 斯 蒂 尔 切 斯 积分 , 集合 4 的 
测度 作为 它 的 指示 函数 14 的 期 望 而 得 到 . 相应 的 抽象 构造 如 下 . 

代替 集 代数 to, 我 们 考虑 在 线性 组 合 、 运算 门 和 U 下 封闭 的 函数 类 多 o. 换 句 
话说 , 我 们 假设 , 如 果 w 和 wz 属于 Bo, 那么 函数 ? 


ou 十 aau2， Wf, wuz (5.2) 


@ 我 们 的 假设 相当 于 要 求 归 。 是 一 个 线性 格 
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也 属于 0. 特别 ,这 理 含 Bo 中 每 个 函数 v 都 可 以 写成 u = ut 一 v- 的 形式 , 其 
路 =uU0 和 w- =um0. 所 谓 Bo 上 的 线性 汽 函 ,是 指 一 个 从 %o 到 Ra 中 的 
映射 E(u), 它 满足 下 列 加 法 法 则 


E(aiu + a2u2) = aaE(ui) + a2E(u2). (5.3) 
如 果 > 0 蕴含 E(wu) > 0, 则 称 此 泛 函 是 正 的 . E 的 范 数 是 对 于 所 有 使 lu| < 1 的 函 


数 ue Bo, (lul) 的 最 小 上 界 . 如 果 常 值 函 数 1 属于 %Bo, 那么 卫 的 范 数 等 于 E(1). 
最 后 , 我 们 称 也 在 Bo 中 是 可 数 可 加 的 , 如 果 当 Dun 属于 Bo 时 


E ( «) 六 zw， (5.4) 
I 1 
一 个 等 价 的 条 件 是 : 如 果 {vn} 是 Bo 中 一 个 单调 收敛 于 零 的 函数 列 , 那么 ? 
E(wn) 一 0. (5.5) 


给 定 一 个 函数 类 Bo, 那么 存在 一 个 包含 Bo 且 在 点 态 极限 运算 下 是 封闭 的 最 
小 类 邓 ，[ 它 在 运算 (5.2) 下 自然 是 封闭 的 . ] 扩张 定理 的 男 一 种 形式 如 下 : ?Bo 中 每 
一 个 范 数 为 1 的 可 数 可 加 的 正 线性 泛 函 可 以 唯一 地 扩张 为 中 中 的 所 有 有 界 (和 许 
多 无 界 ) 画 数 上 的 一 个 范 数 为 1 的 可 数 可 加 正 线性 泛 夯 . 

作为 此 定理 的 适用 性 的 一 个 例子 , 我 们 来 证 明 下 列 重 要 结果 . 
里 斯 (F. Riesz) 表示 定理 9 设 忆 是 R" 中 所 有 在 无 穷 远 处 为 零 @ 的 连续 济 数 所 
成 的 类 上 的 一 个 范 数 为 1 的 正 线 性 泛 函 ， 则 在 博 雷 尔 集 构成 的 o 函数 上 存在 一 个 
测度 P, 使 P{R7} = 1， 且 使 得 E(u) 和 以 关于 PP 的 积分 相等 . 

换 句 话说 ,我 们 的 积分 代表 了 最 一 般 的 正 线性 泛 函 . 

@ 欲 证 (5.4) 与 (5.5) 的 等 价 性 ， 只 需 考虑 uk > 0,uk > 0 的 情形 就 行 了 . 于 是 (5.4) 可 通过 在 


(5.5) 中 令 vn = tun+1 十 Un+2 十 '… 而 得 到 ，(5.5) 式 可 通过 在 (5.4) 中 令 uk = vk 一 uk+l( 即 
Zuk 二 v1) 而 得 到 . 

@ 证 明 的 基本 思想 (可 追 潮 到 勒 贝 格 ) 是 简单 且 巧 妙 的 . 不 难看 出 , 如 果 好 o 中 的 两 个 函数 序列 {un}》 
和 {un} 都 单调 地 收 分 于 同一 极限 , 则 E(un) 和 E(un) 趋 于 同一 极限 . 因此 ,对 这 样 的 单调 极限 
,我们 可 以 定义 E(u) = lim E(un). 现在 考 虚 这 样 的 函数 4 所 成 的 类 入 1 使 得 对 每 一 。 > 0， 
存在 两 个 函数 u 和 到 ,它们 或 者 在 名 o 中 或 者 是 和 Bo 中 的 单调 序列 的 极限 ,满足 uw < u < 主 和 
E(5) 一 E(u) < e. 类 归 : 在 极限 运算 下 是 封闭 的 , 对 于 归 1 中 的 函数 , E(w) 的 定 文 是 显然 的 , 因 
为 我 们 应 当 有 E(w) < E(u) 入 了 (可 

这 个 论证 的 绝妙 之 处 在 于 , 类 入! 通常 比 奶 大 , 我 们 通过 证 明 能 把 泛 函 扩张 到 妈 ! 上 而 完 
成 这 个 简单 的 证 明 . (关于 种 和 归 : 的 比较 , 见 4.7 节 .) 
外 对 任意 的 局 部 紧 空间 成 立 . 另 一 证 明 见 5.1 节 . 
图 如 果 对 给 定 的 e > 0, 存在 一 个 球 ( 紧 集 ), 在 它 之 外 |u(z)| <。, 则 称 v 在 无 穷 远 处 为 0. 
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证 ”决定 性 的 一 点 是 : 如 果 在 无 穷 远 处 为 0 的 连续 函数 序列 {vn} 单调 地 趋 于 0， 
则 收敛 是 一 致 的 . 设 wm > 0， 并 令 jjvnl| = maxvn(z)， 则 E(vn) < lvnl|, 从 而 可 
数 可 加 性 条 件 (5.5) 成 立 ， 由 扩张 定理 ,E 可 以 扩张 到 所 有 有 界 贝 尔 函 数 上 ， 令 
P{4} = E(14), 我 们 就 得 到 一 个 定义 在 所 有 博 雷 尔 集 构成 的 o 代数 上 的 一 个 测度 . 
对 测度 P， 我 们 知道 勒 贝 格 - 斯 蒂 尔 切 斯 积分 由 双向 不 等 式 (4.3) 唯一 确定 . 这 表 
明 , 对 于 在 无 穷 远 处 为 0 的 连续 函数 ww 这 个 积分 与 给 定 的 泛 函 E(u) 相等 . 


4.6 ”乘积 空间 和 独立 变量 序列 


组 合 乘积 空间 (第 1 卷 5.5 节 ) 是 概率 论 的 一 个 基本 概念 , 每 着 谈 及 重复 试验 
时 就 要 用 到 它 . 用 两 个 坐标 表示 平面 R? 上 的 点 , 就 意味 着 把 R? 看 成 它 的 两 个 轴 
的 组 合 乘积 . 用 X 和 YY 表示 这 两 个 坐标 变量 . 把 它们 看 成 是 平面 上 的 函数 时 , 它 
们 是 贝尔 函数 ,并 且 如 果 一 个 概率 测度 P 定义 在 由 R2 中 所 有 博 雷 尔 集 构成 的 o 
代数 上 , 则 分 布 函 数 P{X < zy 和 P{Y < y) 存在 . 它们 在 两 个 轴 上 诱导 出 两 个 测 
度 , 我 们 称 之 为 边缘 分 布 (或 投影 ). 在 这 种 描述 中 , 平面 作为 基本 的 概念 出 现 , 但 
相反 的 程序 往往 是 更 自然 . 例如 , 当 我 们 谈 及 两 个 具有 给 定 的 分 布 的 独立 随机 变量 
时 , 两 个 边缘 分 布 是 基本 概念 , 而 平面 上 的 概率 是 按照 “乘积 法 则 ”由 它们 导出 的 . 
这 个 程序 在 一 般 情 况 下 并 不 比 在 平面 的 情况 下 更 复杂 
于 是 我 们 考虑 任意 两 个 概率 空间 , 即 已 给 定 两 个 样本 空间 EW 和 ct), 由 EY 
的 某 些 集合 构成 的 oa 代数 4 和 由 ef2) 的 某 些 集 合 构成 的 o 代数 U2， 以 及 分 
别 定义 在 由 5 和 2 上 的 概率 测度 PW 和 P@). 组 合 乘积 (Et, CE 中) 是 所 有 序 对 
(zo) zG)) 构成 的 集 ， 其 中 z@ 是 EC 中 中 的 点 . 在 这 个 乘积 空间 的 集合 中 , 我 们 考 
虑 “和 矩形， 即 集 4 c 4 的 组 合 乘积 (40), 4(2)). 对 这 种 形式 的 集 , 我 们 希望 用 
乘积 法 则 
P{(AY, A®)} = PO{AVI}PD{AD} (6.1) 


来 定义 其 概率 . 所 有 可 以 写成 有 限 个 不 相交 的 矩形 的 并 集 的 集合 构成 一 个 代数 slo， 
(6.1) 式 在 so 上 唯一 地 确定 一 个 可 数 可 加 集 函数 . 因此 ,由 扩张 定理 ， 在 包含 所 有 
短 形 的 最 小 o 代数 上 存在 唯一 的 一 个 概率 测度 P, 使 得 矩形 的 概率 由 (6.1) 式 给 出 
我 们 将 用 Mt) x UK2) 表示 这 个 包含 所 有 矩形 的 最 小 o 代数 ， 并 称 测 度 P 为 乘积 测 
度 . 

当然 , 可 以 在 乘积 空间 上 定义 其 他 的 概率 , 例如 通过 条 件 概率 来 定义 概率 . 在任 
何 情况 下 , 基本 的 o 代数 并 至 少 应 和 4D xg2) 一 样 大 , 很 少 需要 讨论 比 2D xg2) 
更 大 的 o 代数 . 当 基 本 代数 和 由 红 = &D x 3 给 出 时 , 下 面 的 关于 随机 变量 的 讨 
论 是 正确 的 . 
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随机 变量 (可 测 函 数 ) 的 概念 是 相对 于 基本 代数 而 言 的 . 在 乘积 空间 的 构造 中 ， 
我 们 必须 区 别 乘积 空间 中 的 随机 变量 与 CD 和 (2) 中 的 随机 变量 . 幸好 这 3 类 随 
机 变量 之 间 的 关系 是 非常 简单 的 . 如 果 忆 和? 分别 是 ec0) 和 EQ 中 的 随机 变量 , 那 
么 我 们 在 乘积 空间 中 考虑 这 样 一 个 函数 ww, 它 在 点 (z0),z(2) 上 取 值 


(zzG2)) = u(r) .u(z(2)). (6.2) 


我 们 来 证 明 , 乘积 空间 (CCD),E(2)) 中 的 随机 变量 类 是 这 样 的 取 有 限 值 的 函数 类 ,使 
得 这 画 数 类 包含 形 如 (6.2) 式 的 函数 的 所 有 线性 组 合 且 在 点 态 极 限 下 是 封 亲 的 . 
首先 ， 很 显然 ， 即 使 把 (6.2) 式 右 边 的 每 个 因子 看 成 是 乘积 空间 中 的 函数 时 ， 
它们 也 是 随机 变量 . 由 此 推出 w 是 随机 变量 , 因此 (etb,e(2)) 中 的 随机 变量 类 至 
少 应 像 上 面 所 断言 的 那样 广泛 . 另 一 方面 , 随机 变量 形成 这 样 的 最 小 函数 类 , 使 得 
这 函数 类 包含 矩形 的 示 性 函数 的 所 有 线性 组 合 且 在 点 态 极限 下 是 封闭 的 . 这 种 指示 
函数 可 以 写成 (6.2) 式 的 形式 ， 因 而 随机 变 基 类 不 可 能 比 上 面 所 断言 的 类 大 . 

两 个 带 有 概率 测度 和 G 的 空间 Rw 和 R" 的 乘积 这 一 特殊 情形 , 曾 间接 地 
出 现在 关于 累 次 积分 的 富 比 尼 定 理 (2.11) 中 . 我 们 现在 可 以 给 出 一 个 不 局 限于 Rr 
中 的 更 一 般 的 定理 . 
关于 乘积 测度 的 富 比 尼 定 理 对 于 任意 的 贝尔 函数 u,u 关于 来 积 测度 的 积分 等 于 
(2.11) 中 的 累 次 积分 . 

(当然 积分 可 以 是 发 散 的 . 对 于 简单 函数 , 定理 是 显然 的 , 一 般 的 情形 可 利用 我 
们 以 前 多 次 使 用 过 的 逼近 方法 推出 . ) 向 具有 3 个 或 更 多 因子 的 乘积 空间 的 推广 是 
显然 的 , 我 们 就 不 再 叙述 了 . 

我 们 现在 讨论 无 穷 随 机 变量 序列 . 我 们 在 第 1 卷 中 讨论 无 穷 贝 努 利 试验 序列 、 
随机 游 动 、 循环 事件 时 曾 遇 到 过 这 样 的 序列 , 在 第 3 章 中 讨论 正 态 随机 过 程 时 也 遇 
到 过 这 样 的 序列 . 当 无 限 多 个 变量 都 定义 在 同一 概率 空间 上 时 , 没有 多 少 东 西 值得 
讨论 , 例如 ， 具 有 正 态 分 布 的 实 直 线 是 一 个 概率 空间 ，{sin nz} 就 是 其 上 的 一 个 无 
穷 随 机 变 基 序列 , 我 们 这 里 关心 的 是 需要 通过 随机 变 基 来 定义 概率 的 情形 . 更 确切 
地 说 , 我 们 的 问题 如 下 . 

令 Re 是 这 样 一 个 空间 , 其 中 的 点 是 无 穷 实数 序列 (zi zz,…)( 即 R” 是 实 直 
线 的 可 数组 合 乘积 ). 我 们 用 X 表示 第 n 个 坐标 变量 ( 即 X 是 Rw 中 一 个 这 样 的 
函数 , 它 在 点 2 = (zl 732，,…) 上 取 值 zs). 假设 我 们 已 知 X1 (Xi1, X2), (X1, X2, X3),…… 
的 概率 分 布 , 希望 在 R> 中 定义 一 个 适当 的 概率 测度 . 不 用 说 , 给 定 的 分 布 在 下 列 
意义 上 必须 是 相 容 的 ; (X1,…, Xn) 的 分 布 是 (X1,… ,Xn+1) 的 边缘 分 布 , 等 等 . 

现在 我 们 正式 定义 “由 有 限 多 次 试验 的 结果 决定 的 事件 ”这 一 直观 概念 ， 设 
4 是 Re 中 的 一 个 集 ， 我 们 约定 ， 当 且 仅 当 存 在 R" 中 的 一 个 集 h1, 使 得 z = 
(zl 7a,…) 属于 4 的 充 要 条 件 是 (z1,…,Zr) 属于 4r 时 , 称 4 只 依赖 于 前 了 个 坐 
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标 .概率 中 的 标准 情况 是 : 已 知 这 样 的 集 的 概率 , 我 们 面临 的 问题 是 把 定义 域 扩大 . 
我 们 不 加 证 明 地 给 出 A. N. 科 尔 莫 戈 罗 夫 在 他 的 概率 论 经 典 公理 基础 (1933) 中 (在 
稍 广 泛 的 情况 下 ) 推导 出 的 基本 定理 . 这 一 定理 促进 了 现代 测度 论 的 发 展 . 
定理 1 XX, (Xi,X2), (Xi,XX2, Xa),… 的 一 个 相 容 概率 分 布 族 , 可 以 唯一 地 扩张 为 
Re 中 这 样 的 最 小 o 代数 在 上 的 一 个 概率 测度 ,使 得 这 个 代数 包含 所 有 仅 依赖 于 
有 限 多 个 坐标 的 集合 .@ 

重要 的 是 , 所 有 的 概率 都 是 从 有 限 维 集合 出 发 通过 逐次 取 极 限 而 定义 的 . 并 中 
的 每 个 集合 4 可 以 在 下 列 意义 上 用 有 限 维 集合 来 允 近 . 给 定 一 个 e > 0, 存在 一 个 
n 和 一 个 只 依赖 于 前 n 个 坐标 的 集合 4An, 使 得 

P{4-4n4j<e P{An — ANAn} <e. (6.3) 


换 句 话说 , 属于 4 或 An 但 不 同时 属于 它们 二 者 的 点 所 成 的 集合 的 概率 小 于 2e. 因 
此 ,可 以 选择 4s， 使 得 P{An} 一 P{A}. (6.4) 


有 了 定理 1, 我 们 就 可 以 谈 及 具有 任意 给 定 分 布 的 相互 独立 的 无 穷 随机 变量 序 
列 了 . 事实 上 , 在 第 1 卷 中 已 出 现 过 这 样 的 序列 , 但 那 时 我 们 必须 小 心地 用 特殊 的 
取 极 限 方法 来 定义 概率 , 而 定理 1 为 我 们 提供 了 合乎 需要 的 行动 自由 . 这 点 可 以 用 
下 列 两 个 分 别 属 于 A. N. 科 尔 莫 龙 罗 夫 (1933) 以 及 休 伊 特 (E. Hewitt) 和 萨 维 奇 (L. 
J. Savage)(1955) 的 重要 定理 加 以 充分 说 明 . 它们 对 于 概率 论证 是 典型 的 , 而 且 在 许 
多 情况 下 起 着 中 心 的 作用 . 
定理 2  ( 尾 事 件 的 0-1 律 ) 设 变量 Xi 是 相互 独立 的 ， 且 对 每 个 n， 事件 4 与 
X1,… ,Xn 独立 ,@ 则 或 者 P{4} = 0 或 者 P{A} = 1. 
证 ”从 原则 上 讲 , 诸 变 基 Xk 可 以 定义 在 一 个 任意 的 概率 空间 中 , 但 它们 把 这 个 空 
间 映 射 到 以 它们 为 坐标 变量 的 乘积 空间 R” 中 . 利用 (6.3) 中 所 用 的 记号 , 集合 4 
与 hn 是 独立 的 ,于 是 第 一 个 不 等 式 蕴 含 P{4} 一 P{A}P{A4n} <e 因此, P{4} = 
P?{A}. p 
例 (a) 级 数 沁 Xn 以 概率 0 或 1 收敛. 由 所 有 使 imsupX。 = oo 的 点 所 成 的 集 
合 的 概率 或 者 是 0, 或 者 是 1. p 
定理 3 (对 称 事件 的 0-1 律 ) 假设 诸 变 量 Xk 是 相互 独立 的 , 并 且 具 有 相同 的 分 布 ， 
如 果 集合 4 在 坐标 的 有 限 置 换 下 是 不 变 的 @， 那么 或 者 P{4} = 0, 或 者 P{A} = 1. 

@ 这 个 定理 也 适用 于 局 部 紧 空 间 的 乘积 ; 例如 , 变量 Xn 可 以 解释 为 随机 向 量 (R7 中 的 点 ). 

@ 更 确切 地 说 ，A 与 用 Xi,-…, Xn 定义 的 每 个 事件 是 独立 的 . 换 名 话说 ，A 的 指示 画 数 是 一 个 与 

Xl,…， Xn 独立 的 随机 变量 . 
@ 更 确切 地 说 , 如 果 (a1,a2,…) 是 A 中 的 点 , ni 和 na 是 任意 两 个 整数 ,那么 假设 A 也 包含 通过 


把 on; 和 ans 对 换 并 让 其 他 坐标 保持 不 变 而 得 到 的 点 . 这 个 条 件 可 自动 地 扩张 到 涉及 大 个 坐标 的 
置换 上 去 . 
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证 与 在 上 一 定理 的 证 明 中 一 样 , 我 们 把 Xk 作为 坐标 变量 , 并 利用 (6.3) 中 所 出 
现 的 集合 4. 颠倒 前 2n 个 坐标 变量 的 次 序 , 并 保持 其 他 的 变量 不 变 , 我 们 就 可 从 
4 如 得 到 一 个 集合 ， 记 为 Bn. 根据 假设 , 在 (6.3) 中 把 An 换 为 Bs 时 不 等 式 仍 成 
立 . 由 此 推出 , 所 有 属于 4 或 4 站 Bn 但 不 同时 属于 它们 二 者 的 点 构成 的 集合 的 
概率 < 4e, 因此 


P{AnNBn} 一 P{A}. (6.5) 
因为 4 只 依赖 于 前 n 个 坐标 , 所 以 Bn 只 依赖 于 编号 为 n 十 1,…,2n 的 坐标 . 因 
此 , hn 和 B。 是 独立 的 ,由 (6.5) 式 我 们 又 得 到 了 结论 P{4} = P2{4]}. > 


例 (b) 设 Sn= Xi+… 十 Xn, 并 令 4 是 事件 {Sn ETio.}, 其 中 了 是 直线 上 一 
个 任意 区 间 , 那么 4 在 有 限 置 换 下 是 不 变 的 . 关于 记号 的 意义 见 4.1 节 例 (a).] > 


4.7” 零 集 和 完备 化 


概率 为 0 的 集合 通常 是 可 以 忽略 的 ,两 个 只 在 这 样 一 个 零 集 上 不 相等 的 随机 
变量 “在 实际 上 是 相同 的 ”. 较 正 式 地 , 我 们 称 它们 是 等 价 的 . 这 就 是 说 , 如 果 在 一 
个 零 集 上 改变 一 随机 变量 的 定义 , 则 所 有 的 概率 关系 保持 不 变 , 因此 我 们 允许 一 个 
随机 变量 在 一 零 集 上 无 定义 . 一 个 典型 的 例子 是 循环 事件 第 一 次 出 现 的 时 刻 : 它 以 
概率 1 为 一 个 数 , 但 以 概率 0 保持 不 确定 (或 称 为 o0). 因此 , 我 们 经 常 讨论 的 是 等 
价 随机 变量 类 , 而 不 是 单个 的 变 基 , 但 通常 最 简单 的 办 法 是 选择 一 个 合适 的 代表 而 
不 讨论 等 价 类 . 

零 集 导致 了 我 们 的 概率 结构 中 唯一 的 与 直观 不 相符 的 地 方 ， 在 所 有 的 概率 空 
间 中 , 情况 是 相同 的 ， 但 只 描述 直线 上 的 情形 就 行 了 . 按照 我 们 的 概率 结构 ， 概 率 
只 对 博 雷 尔 集 才 有 定义 ,一般 地 一 个 博 雷 尔 集 包 含 许多 不 是 博 雷 尔 集 的 子 集合 . 因 
而 , 零 集 可 能 包含 没有 定义 概率 的 集合 , 这 与 零 集 的 每 个 子 集 还 是 零 集 这 个 自然 的 
期 望 不 符 . 这 种 不 一 致 不 会 导致 严重 后 果 , 而 且 很 容易 把 这 种 不 一 致 消除 掉 , 事实 
上 ，, 假设 我 们 引入 一 个 公设 : 如 果 4 CB 且 P{B} = 0, 则 P{4} = 0. 因此 , 我 们 
应 把 所 有 博 雷 尔 集 构成 的 o 代数 (至 少 ) 扩大 为 包含 的 所 有 集合 和 所 有 和 零 集 的 
子 集合 的 最 小 o 代数 册 . 直接 的 描述 如 下 : 一 集合 4 属于 如 的 充 要 条 件 , 是 它 与 
某 个 博 雷 尔 集 4 只 相差 一 个 零 集 8. 只 要 令 P{4} = P{49}, 就 可 以 把 定义 域 从 妇 
扩大 到 4. 显然 , 这 种 定义 是 唯一 的 且 导 出 了 如 的 一 个 完全 可 加 测度 . 按照 这 种 
方法 , 我 们 得 到 了 一 个 满足 我 们 的 公设 的 概率 空间 , 且 在 此 空间 中 博 雷 尔 集 的 概率 
保持 不 变 . 


@ 更 确切 地 说 , 要 求 4 一 4 门 49 与 40 一 4A 门 A? 包含 在 一 个 零 集中 . 
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我 们 称 这 样 描述 的 构造 为 (一 个 给 定 概率 空间 的 ) 勒 贝 格 完备 化 . 在 只 与 一 个 基 
本 的 概率 分 布 有 关 的 问题 中 , 这 种 完备 化 是 很 自然 的 . 因此 , R: 中 区 间 的 长 度 通常 
被 完备 化 一 个 不 仅仅 局 限于 博 雷 尔 集 之 上 的 勒 贝 格 测度 . 但 是 当 我 们 讨论 分 布 族 时 
(例如 讨论 带 有 不 确定 的 概率 p 的 无 限 伯 努 利 试验 序列 时 ), 完备 化 是 困难 的 . 事实 
上 , 4 依赖 于 基本 分 布 , 因此 当 概 率 改 变 时 , 关于 tl 的 随机 变量 可 能 就 不 再 是 随 
机 变量 了 . 
例 设 a1,a2,… 是 Ri 中 的 一 列 点 ,分别 具有 概率 pi,p2,…, 其 中 pk = 1.{ai} 
的 余 集 的 概率 为 0, 因而 4 包含 R! 中 的 所 有 集合 . 于 是 每 个 有 界 函数 4 是 期 望 为 
pku(ax) 的 随机 变量 , 但 当 基 本 分 布 不 是 离散 分 布 时 , 讨论 “任意 函数 ”将 是 危 
险 的 . p 
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本 章 讨论 维 空间 R7 中 的 概率 分 布 . 从 概念 上 讲 , 这 个 概念 是 以 上 一 章 简单 
讨论 过 的 积分 理论 为 基础 的 , 但 是 事实 上 , 为 了 理解 本 章 的 内 容 , 并 不 需要 什么 高 
深 的 知识 ， 因 为 这 里 的 概念 和 公式 在 直观 上 都 很 接近 于 我 们 在 第 1 卷 和 本 卷 前 3 
章 中 所 遇 到 的 概念 和 公式 . 

(与 离散 样本 空间 相 比 较 ) 本 章 的 新 颖 之 处 是 , 并 不 是 每 个 集合 都 有 概率 ,并 不 
是 每 个 函数 都 可 作为 随机 变量 . 幸好 这 种 理论 上 的 复杂 化 在 实际 中 是 不 太 显著 的 ， 
因为 我 们 可 以 分 别 从 区 间 和 连续 函数 出 发 ， 把 注意 力 限 制 到 可 以 由 它们 经 过 初等 
运算 和 (可 能 无 穷 多 次 ) 取 极 限 得 到 的 集合 和 函数 上 面 . 这 就 确定 了 博 雷 尔 集 类 和 
贝尔 函数 类 . 对 事实 而 不 对 逻辑 关系 感 兴趣 的 读者 不 必 为 精确 的 定义 (已 在 第 4 章 
给 出 ) 烦恼 . 他 们 应 依靠 他 们 的 直观 并 假设 所 有 的 集合 和 函数 都 是 “合适 ”的 . 定理 
非常 简单 ,要 理解 它们 只 要 有 初等 微 积分 的 知识 就 够 了 . 在 把 集合 和 函数 二 词 作 
为 博 雷 尔 全 和 贝尔 函数 的 缩写 的 约定 下 , 推导 是 严格 的 . 

初次 阅读 应 限于 5.1 节 ~5.4 节 和 5.9 节 . 5.5 节 ~5.8 节 包 含 必要 时 可 参考 的 
工具 和 不 等 式 . 最 后 几 节 充分 地 讨论 了 条 件 分 布 和 条 件 期 望 的 理论 , 这 些 结果 仅 在 
6.11 节 和 7.9 节 中 讨论 著 时 侦 然 用 到 . 


5.1 分布 与 期 望 


术语 随机 变量 的 即使 最 简单 的 使 用 ,也 可 能 要 间接 引用 到 一 个 复杂 的 概率 空 

间或 一 个 复杂 的 试验 . 例如 ,一 个 理论 模型 也 许 包含 1028 个 质点 的 位 置 和 速度 , 但 

我 们 把 注意 力 集中 于 温度 和 能 其 上 . 这 两 个 随机 变量 把 原来 的 样本 空间 映射 到 平面 

R? 内 , 而 且 它 们 带 有 原来 的 概率 分 布 . 实际 上 , 我 们 讨论 的 是 一 个 二 维 问题 , 原先 

的 样本 空间 在 背景 上 模糊 地 呈现 出 来 . 因此 ,有 限 维 欧 几 里 得 空间 Rr 是 最 重要 的 
样本 空间 , 我 们 转向 对 适当 的 概率 分 布 作 系统 的 研究 

我 们 从 直线 Ri 开始 . 用 5 和 a,5 表示 由 a < z <5 和 a < z <b 定 义 的 区 

@ 应 该 知道 , 这 种 简化 不 能 通过 任何 限制 于 使 用 连续 函数 或 任 一 其 他 种 类 的 “合适 ”函数 的 理论 达到 . 

例如 , 在 2.8 节 (8.3) 中 我 们 用 一 个 无 穷 级 数 来 定义 一 个 密度 yp. 建立 p 为 合适 的 条 件 是 一 件 乏 昧 

且 无 意义 的 事 , 但 在 简单 的 情形 下 公式 是 最 然 的 . 贝尔 函数 的 利用 相当 于 含糊 的 “一 般 地 成 立 ” 的 


代用 词 . 一 一 顺便 提 一 句 ,必须 限制 于 贝尔 函数 的 少数 几 个 场合 将 另外 指出 ，5.8 节 (b) 中 的 凸 函 
数理 论 就 是 一 个 例子 . 
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间 . (不 排除 闭 区 间 缩小 为 一 点 的 极限 情形 . ) 我 们 将 把 半 开 区 间 表 示 为 a,5 和 4,6. 
在 一 维 中 , 所 有 的 随机 变量 都 是 坐标 变量 X( 即 在 点 z 的 值 为 = 的 函数 ) 的 函数 . 因 
此 ,所 有 的 概率 可 用 下 列 分 布 函数 表示 ， 


正 (z) = P{X 和 zj， -oo<z< oo. (1.1) 


特别 , 了 = a,5 的 概率 为 P{7)} = F(b) 一 下 (a). 当 我 们 计 论 变化 着 的 分 布 时 , 灵活 的 
标准 记号 P{ } 是 不 适用 的 . 再 引入 一 个 新 字母 是 不 经 济 的 , 表示 对 FF 的 依赖 性 
的 记号 Pp{ } 又 太 和 抽 . 最 简单 的 是 对 点 函数 (1.1) 和 相应 的 区 间 函 数 利用 同一 
个 字母 F, 我们 用 F{T} 来 代替 P{ 了 }. 换 句 话说 ,我们 用 大 括号 表示 F{4} 中 的 自 
变量 是 一 个 区 间或 集合 , FF 作为 一 个 区 间 函 数 (或 测度 ) 出 现 . 当 用 小 括号 时 , F(a) 
中 的 自 变 基 是 一 个 点 . 点 函数 F( ) 与 区 间 函 数 F{ } 之 间 的 关系 可 用 下 式 表示 : 


F(z) = F{—00,2}, F{a,b} = F(b) — F(a). (1.2) 


实际 上 , 点 函数 F(z) 的 概念 是 多 余 的 , 只 是 有 利于 解析 表示 和 图 像 表 示 . 原始 的 概 
念 是 对 区 间 赋 概 . 我 们 称 点 函数 F(。 ) 为 区 间 函 数 F{ } 的 分 布 函 数 . 记号 F( ) 
和 F{ } 指 的 是 同一 个 内 容 , 当 提 及 “概率 分 布 F” 时 不 会 产生 混淆 . 我 们 应 习惯 
于 借助 于 区 间 函 数 或 测度 进行 思考 , 而 仅 在 作 图 像 描述 时 才 利 用 分 布 函 数 . 2 
定义 “ 称 直 线 上 的 一 个 点 函数 下 为 一 个 分 布 函 数 ， 如 果 

(iD 瓦 是 不 减 的 , 即 a <b 东 含 F(a) < FF(b); 

人 已 是 右 连续 的 ,@ 即 F(a) = F(a+); 

(ii) F(~00) = 0，F(co) < oo. 
尺 是 一 个 概率 分 布 函 数 ， 如 果 它 是 一 个 分 布 画 数 且 (co) = 1. 此 外 ， 称 局 是 亏 可 
的 ， 如果 FF(o0) < 1. 

我 们 着 手 来 证 明 ， 每 个 分 布 函数 都 导致 一 种 对 直线 上 所 有 集合 的 赋 概 . 第 一 步 
是 对 区 间 赋 概 . 因为 F 是 单调 的 , 所 以 对 每 一 点 a 都 存在 一 个 左 极限 F(a 一 ). 我 们 
用 下 列 式 子 定义 一 个 区 间 函 数 F{T}: 


F{a,b} = FU — F(a-), F{a6} = F(b-)— F(a), (13) 
F{ab} = FUO)- F(a), F{a,b} = F(6-)— F(a-). 


@ 使 用 记号 时 要 特别 小 心 对 于 入 门 书 似乎 是 可 取 的 ,但 是 我 们 希望 读者 不 要 沉迷 于 这 种 前 后 的 一 至 
性 , 应 敢于 不 加 区 别 地 写 出 下 (了) 和 F(z), 结果 不 会 引起 混 清 ,， 幸好 在 最 好 的 数学 书 中 同一 页 上 的 
同一 记号 (特别 是 1 和 三) 表示 不 同 的 意义 是 很 常见 的 . 

@ 跟 通常 一 样 ， 我 们 用 f(a+) 表示 当 z 从 a 的 右边 趋 于 a 时 f(z) 的 极限 《如果 它 存在 的 话 )， 用 
J(oo) 表示 当 z 一 co 时 f(z) 的 极限 . 对 于 f(a 一 ) 和 f( 一 00) 可 作 类 似 的 解释 . 这 个 记 导 可 以 搬 
到 高 维 空间 中 . 
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对 于 缩小 成 一 点 的 区 间 Ga，F{fma} = F(a) F(a-), 它 是 下 在 a 点 的 跳跃. (不 
久 将 看 出 , F 是 “几乎 处 处 ”连续 的 . ) 
为 了 证 明 对 区 间 的 赋值 (1.3) 满足 概率 论 的 要 求 , 我 们 来 证 明 一 个 简单 的 引 理 
(读者 可 以 把 它 作为 一 个 直观 上 很 明显 的 结论 而 承认 它 ). 
引 理 1 (可 数 可 加 性 ). 如 果 一 个 区 间 了 是 可 数 多 个 不 相交 区 问 ,12,… 的 并 集 ， 
那么 
F{I} = ZE (1.4) 


证 在 1= 5, 五 = 了 2 = 而 三 , …, ,= ob 的 特殊 情形 下 , 结论 是 
显然 的 . 了 = 5 的 最 一 般 的 有 限 分 划 可 以 通过 把 端点 ok 从 一 个 子 区 间 重新 分 配给 
另 一 个 子 区 间 而 得 到 ,从 而 可 加 性 法 则 (1.4) 对 于 有 限 分 划 是 成 立 的 . 

在 考虑 无 限 多 个 区 间 I 的 情形 时 ， 只 要 假设 了 是 闭 区 间 就 行 了 . 由 给 定 的 分 
布 函数 F 的 右 连续 性 可 知 ,对 于 预先 给 定 的 < > 0, 可 以 找到 一 个 包含 I 的 开 区 
间 不 , 使 得 0 < FP{ 矿 } - F{I} < e+2-*. 因为 了 存在 一 个 有 限 铸 盖 1 洲 ,…,I#， 
所 以 


F{I} < F{IM} + + FP{I#} 


< F{N}+:+F{In}+e, (1.5) 

于 是 
FJ< 和 FA (6) 
但 是 相反 的 不 等 式 也 成 立 ， 因 为 对 于 每 个 n, 都 存在 一 个 包含 ,…, I 的 工 的 有 
限 分 划 . 这 就 完成 了 证 明 . > 


如 同 在 4.2 节 中 所 说 明 的 那样 , 现在 可 以 对 每 个 由 有 限 多 个 或 可 数 多 个 不 相交 
区 间 4x 组 成 的 集合 4, 定义 


FU)= DF{A}. (7) 


直观 导致 我 们 希望 每 个 集合 都 可 用 这 样 的 区 间 的 并 集 来 逼近 ,测度 论证 实 了 这 个 
看 法 是 正确 的 .9 利用 自然 的 逼近 和 取 极 限 的 办 法 , 可 以 把 所 的 定义 扩展 到 所 有 的 
集合 上 , 并 保持 可 数 可 加 性 (1.7). 这 种 扩展 是 唯一 的 , 所 得 到 的 赋值 被 称 为 一 个 概 
率 分 布 或 概率 测度 . 

关于 术语 的 注 ”在 文献 中 , 分 布 一 词 以 各 种 意义 被 自由 地 应 用 . 因此 , 这 里 应 规定 
一 下 我 们 将 坚持 使 用 的 用 法 . 


@ 应 记 住 如 下 的 约定 : 集合 和 函数 二 词 是 博 雷 尔 集 和 贝尔 函数 的 缩写 . 
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一 个 概率 分 布 或 概率 测度 ， 是 一 个 对 服从 可 数 可 加 性 条 件 (1.7) 和 正规 化 条 件 
F{f=so'col = 1 的 集合 赋值 F{4} > 0. 更 一 般 的 测度 (或 质量 分 布 ) 可 以 通过 去 掉 
正规 化 条 件 来 定义 ; 勒 贝 格 测度 (或 普通 的 长 度 ) 是 一 个 最 著名 的 例子 . 

与 第 1 卷 的 循环 事件 理论 一 样 ,我 们 有 时 必须 讨论 对 全 直线 赋予 总 质量 p = 
了 {=00,00} < 1 的 测度 . 这 种 测度 称 为 具有 亏 值 1 一 p 的 亏损 概率 测度 . 为 了 使 文体 
清晰 ， 也 是 为 了 强调 ， 我 们 有 时 谈 及 正常 概率 分 布 ,但 此 外 形容 词 “正常 ”两 字 是 
多 余 的 . 

测度 m{4} 的 自 变量 是 一 个 集合 , 用 大 括号 表示 . 对 于 每 个 有 界 测度 m, 有 一 
个 分 布 函 数 ， 即 用 m(z) = m{ 二 06,3} 定义 的 点 函数 与 之 对 应 . 我 们 用 同一 字母 表 
示 它 ,把 自 变量 写 在 小 括号 内 . 同一 字母 的 这 两 种 用 法 不 会 引起 混淆 , 同样 术语 分 
布 既 可 看 成 是 概率 分 布 的 缩写 , 也 可 以 看 成 是 它 的 分 布 函 数 的 缩写 . 

在 第 1 卷 第 9 章 中 , 我 们 把 随机 变量 定义 为 样本 空间 中 的 实 函 数 , 我 们 将 沿用 
这 个 用 法 . 当 把 直线 作为 样本 空间 时 ,每 个 实 函 数 都 是 一 个 随机 变量 . 坐标 变量 X 
是 基本 变量 , 所 有 其 他 的 随机 变量 都 可 表示 为 它 的 函数 . 随机 变量 的 分 布 函数 被 
定义 为 P{u(X) < z}, 可 以 用 坐标 变量 X 的 分 布 来 表示 . 例如 ,X3 的 分 布 函数 
为 (FWz). 

我 们 称 函数 4 为 一 个 简单 函数 ,如 果 它 只 取 可 数 多 个 值 a1,a2,…. 如 果 hn 表 
示 使 等 于 on 的 点 的 集合 , 那么 只 要 下 列 级 数 绝对 收 剑 , 我 们 就 把 期 望 瑟 (u) 定义 
为 


E(w) = 》 axrF{Ak}. (1.8) 


在 相反 的 情形 下 ， 我 们 称 u 关于 F 是 不 可 积 的 . 于 是 ,为 使 u 有 期 望 , 当 上 且 仅 当 
BE(lul) 存在 . 从 定义 (1.8) 出 发 ,我 们 对 任意 有 界 函 数 定义 期 望 如 下 . 选取 e > 0， 
用 4 表示 使 得 (n - 1)e < u(z) < ne 的 点 z 的 集合 .对 于 E(w) 的 任 一 合理 的 定义 ， 
我 们 应 有 


> om -De:F{An} < E(u) < Yne: FP{An}. (1.9) 


(两 端的 项 表示 两 上 满足 z < u < 5 和 5 一 g = 的 近似 简单 函数 和 的 期 望 . ) 
由 于 假设 % 是 有 界 的 , 所 以 (1.9) 式 中 的 两 上 级 数 只 包含 有 限 多 个 非 零 项 , 它们 的 
差 等 于 e 志 F{4} =c. 把 e 换 为 让 把 (1.9) 式 中 的 第 一 项 增 大 ,最 后 一 项 减 小 . 
因此 不 难看 出 , 当 e 一 0 时 , (1.9) 式 中 两 端的 两 个 项 趋 于 同一 个 极限 , 我 们 把 这 个 
极限 定义 为 E(w). 对 于 无 界 的 u， 只 要 (1.9) 式 中 的 两 个 级 数 绝对 收敛, 则 可 用 同 
样 的 手续 定义 E(w), 否则 E(w) 仍 无 定义 . 

我 们 称 用 这 种 简单 方法 定义 的 期 望 为 u 关于 下 的 勒 贝 格 - 斯 蒂 尔 切 斯 积分 
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当 需 要 强调 期 望 对 F 的 依赖 性 时 , 积分 记号 更 可 取 , 我 们 把 它 写 成 另 一 种 形式 
E(w) = / (a)F{az), (1.10) 


其 中 z 作为 哑 变 量 出 现 . 除了 少数 几 个 场合 外 , 我 们 将 只 讨论 逐 段 连续 的 或 单调 的 
被 积 函数 ， 这 样 4。 就 成 了 有 限 多 个 区 间 的 并 集 ， 于 是 ，(1.9) 式 中 的 两 个 和 式 是 
在 普通 积分 的 初等 定义 中 所 用 的 大 和 与 小 和 的 重 排 . 一 般 的 勒 贝 格 - 斯 蒂 尔 切 斯 积 
分 具有 积分 的 基本 性 质 , 还 有 一 个 附加 的 优点 , 即 更 容易 进行 形式 上 的 运算 和 取 极 
限 . 我 们 把 期 望 的 应 用 局 限于 如 此 简单 的 情形 , 以 致 于 为 了 理解 每 个 单个 的 步骤 不 
需要 知道 一 般 的 理论 . 对 理论 背景 和 基本 事实 感 兴趣 的 读者 可 以 参阅 第 4 章 . 

例 (a) 设 忆 是 对 点 a1,a2,… 赋予 质量 p1,p2,… 的 离散 分 布 . 于 是 当 级 数 收敛 
时 , 显然 有 E(w) = 于 v(ok)pk. 这 与 第 1 卷 第 9 章 中 的 定义 一 致 

例 (b) ”对 于 由 一 个 连续 密度 定义 的 分 布 ,只 要 下 列 积分 绝对 收敛 , 就 有 


Ew = 矿 veo7Gadr (111) 


关于 密度 的 一 般 概念 见 5.3 节 . 

向 高 维 空间 的 推广 可 用 几 句 话 来 描述 . 在 R2 中 , 点 z 是 一 对 实数 , z = (z1, 22). 
我 们 将 把 不 等 式 按 各 个 坐标 进行 解释 , ?于 是 a < 表示 al < bl 和 az < bo( 或 者 
“a 位 于 5 的 西南 ”). 这 只 导出 偏 序 , 即 点 a 和 ?不 必 满 足 两 个 关系 式 a <b 或 a>b 
中 的 任 一 个 . 我 们 对 于 由 那 4 种 可 能 类 型 的 双向 不 等 式 a < z <b 等 定义 的 集合 ， 
仍 用 “区 间 ” 一 词 . 它们 是 平行 于 坐标 轴 的 矩形 , 可 以 退化 为 线段 或 点 . 

唯一 的 新 特征 是 : 满足 a< 5b<c 的 二 维 区 间 友 6c, 不 是 wb 和 页 5 的 并 集 . 对 
应 于 一 个 对 区 间 了 赋予 值 F{1} 的 区 间 函 数 , 我 们 可 以 引入 它 的 分 布 函数 ,与 前 面 
一 样 , 把 它 定义 为 F(z) = F{=557z}. 但 是 ,一 个 用 这 个 分 布 函数 表示 F{aB} 的 
公式 要 涉及 区 间 的 所 有 4 个 顶点 . 事实 上 , 考虑 那 两 个 平行 于 za 轴 并 以 矩形 wb 
的 边 为 底 的 无 穷 带 形 , 立即 可 以 看 出 ， F{ab} 由 下 列 所 谓 的 混合 差 给 出 ， 


F{a,b} = F(b1,b2) — F(a1, ba) — F(b1,02) + F(a a2). (1.12) 
对 于 分 布 函 数 来 说 , 右边 是 非 负 的 . 这 蕴含 F(z1,z2) 单调 地 依赖 于 zl 和 zz, 但 是 
这 样 的 单调 性 不 能 保证 (1.12) 的 正 性 . (见习 题 4. ) 
显然 , 高 维 空间 中 分 布 函 数 的 使 用 价值 是 很 有 限 的 . 要 不 是 为 了 与 Ri 中 类 似 ， 
我 们 可 以 把 所 有 的 讨论 限制 到 区 间 函 数 上 . 在 形式 上 ， 只 要 把 单调 性 条 件 (i) 换 为 
@ 这 个 概念 是 在 3.5 节 中 引进 的 . 
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以 下 条 件 ， 即 对 于 a < 5,，(1.12) 中 的 混合 差 是 非 负 的 ， 那 么 R:! 中 分 布 函数 的 
定义 就 可 搬 到 R2 上 . 与 在 (1.3) 中 一 样 ， 这 样 的 分 布 函数 也 可 以 导出 一 个 区 间 函 
数 ,所 不 同 的 是 在 这 里 混合 差 起 着 了 ! 中 的 简单 差 的 作用 . 引 理 1 和 它 的 证 明 仍然 
成 立 . ® 

有 时 把 期 望 的 一 个 简单 的 ， 但 在 概念 上 很 重要 的 性 质 认为 是 不 证 自明 的 . 两 个 坐标 变 
量 的 任 一 函数 u(X) = u(X1, X2) 都 是 一 个 随机 变量 , 因此 它 有 一 个 分 布 函 教 G. 现在 可 以 
用 两 种 方法 定义 期 望 E(u(X)), 即 可 定义 为 u(z1,z2) 关于 平面 上 给 定 概率 的 积分 , 也 可 以 
用 的 分 布 函 数 G 定义 为 


zw= {votav}. (113) 


根据 用 4.4 节 (4.3)2 近 似 和 表达 的 上 述 积分 的 定义 ,这 两 个 定义 是 等 价 的 . 需要 注意 的 是 ， 
虽然 随机 变量 2 既 可 以 看 作为 原先 的 概率 空间 © 中 的 函数 , 也 可 以 看 作为 一 个 通过 © 的 
适当 映射 所 得 到 的 空间 中 的 函数 , 但 是 它 的 期 望 (如果 它 存在 的 话 ) 却 有 一 个 固有 的 含义 ; 
特别 ,2 本 身 把 © 映 到 直线 上 . 在 直线 上 , 它 变 为 坐标 变量 . 

从 现在 起 , R: 中 的 体系 和 R? 中 的 体系 就 没有 什么 区 别 了 . 特别 , 期 望 的 定义 
与 维 数 无 关 . 

把 前 面 的 结果 总 结 一 下 就 有 : 任 一 分 布 画 数 都 在 R7 中 的 博 雷 尔 集 组 成 的 0 
代数 上 导出 一 个 概率 测度 ， 从 而 定义 了 一 个 概率 空间 这 可 以 非 正式 地 重新 叙述 
如 下 : 我 们 证 明了 ,与 在 密度 的 情形 一 样 ， 离 散 样 本 空间 的 概率 体系 不 用 作 任 何 
形式 上 的 改变 就 可 搬 过 来 , 从 而 说 明 前 3 章 所 用 的 概率 术语 是 有 道理 的 . 当 我 们 谈 
到 个 随机 变量 X1,…,X; 时 ,我 们 认为 它们 是 定义 在 同一 概率 空间 上 的 ， 从 而 
(X1,…,Xr) 的 联合 分 布 存在 . 于是, 我 们 可 以 自由 地 把 X 解释 为 样本 空间 R7 中 
的 坐标 变量 . 

几乎 可 以 不 加 说 明 而 继续 使 用 像 边缘 分 布 ( 见 3.1 节 和 第 1 卷 9.1 节 ) 或 独立 变 
基 等 术语 . 关于 这 些 变量 的 基本 事实 和 在 离散 情形 中 一 样 . 

人 GDX 和 YY 是 具有 (一 维 ) 分 布 已 和 G 的 独立 随机 变量 , 是 指 (X,Y) 的 联合 分 
布 函数 由 乘积 F(z1)F(z2) 给 出 . 这 个 陈述 可 以 适用 于 一 给 定 概率 空间 中 的 两 个 变 
量 , 也 可 以 作为 下 列 陈述 的 缩写 : 我 们 引进 一 个 以 X 和 Y 为 坐标 变量 的 平面 , 并 
用 乘积 法 则 来 定义 概率 . 这 个 说 明 也 同样 适用 于 随机 变量 对 或 随机 变量 的 三 元 组 ， 
等 等， 


@ 证 明 利用 了 下 面 的 事实 , 在 一 维 区 间 的 有 限 划分 中 , 子 区 间 按 从 左 到 右 的 自然 顺序 出 现 . 一 个 同样 
整齐 的 排列 刻 划 了 二 维 区 间 a,6 的 棋盘 广 划 分 的 特征 ， 即 划分 成 mn 个 子 区 间 , 这 些 子 区 间 是 通 
过 单独 细 分 局 的 两 边 并 过 所 有 分 点 作 坐 标 办 的 平行 线 而 得 到 的 . 对 于 这 样 的 棋盘 式 划分 ,有限 


可 加 性 的 证 明 不 需要 改变 . 对 于 任 一 划分 ,都 有 一 个 相应 的 棋盘 式 的 加 细 ， 从 有 限 划分 到 可 数 划分 
的 过 渡 与 维 数 无 关 . 


@ 一 个 特殊 情形 包含 在 第 1 卷 9.2 节 的 定理 1 中 . 
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鸭 ) 如 果 mm 元 组 (X1,…, Xm) 与 于 元 组 (四 区) 独立 , 那么 (对 于 任意 一 
对 函数 4 和 v)u(X1,…, Xm) 与 v(i,…,Y) 也 是 独立 的 . 

(ii) 如 果 X 和 了 独立 , 那么 当成 和 工 的 期 望 存在 时 ( 即 当 积分 绝对 收敛 时 )， 
E(XY) = E(X)E(Y). 

下 列 简 单 结果 是 非常 有 用 的 . 
引 理 2 一 个 概率 分 布 可 由 所 有 在 革 有 限 区 间 外 等 于 零 的 连续 函数 以 的 期 望 E(u) 
唯一 确定 . 
证 设 I 是 一 个 有 限 开 区 间 , v 是 一 个 在 工 中 为 正 而 在 工 外 等 于 零 的 连续 函数 , 那 
么 在 每 个 点 z EI 上 ，v(z) 一 1, 因而 E(YD) 一 F{I}. 于 是 , 对 于 所 有 的 开 区 
间 , 给 定 的 那 一 类 连续 函数 的 期 望 唯一 地 确定 了 值 F{T}, 这 些 值 唯一 地 确定 了 F. 

p 

注 I9 。 里 斯 表示 定理 ”在 上 一 引 理 中 , 期 望 是 用 一 个 给 定 的 概率 分 布 定义 的 . 我 们 通常 
(例如 在 7.3 节 的 矩 问 题 中 ) 从 一 个 给 定 的 泛 函 ， 即 从 一 个 对 某 些 函 数 的 赋值 E(u) 出 发. 我 
们 癌 : 是 否 存在 一 个 概率 分 布 F, 使 得 


Bt = 三” va)Ptaz (14) 
可 以 证 明 ,3 个 明显 的 必要 条 件 也 是 充分 的 - 

定理 ”假设 对 于 每 一 个 在 某 有 限 区 闻 外 等 于 零 的 连续 函数 uu， 都 有 一 个 具有 下 列 性 质 的 数 
BE(u) 与 之 对 应 ， (i) 此 汽 函 是 线性 的 ， 即 对 于 所 有 的 线性 组 合 ， 


E(ciwi + cau2) = c1E(w) + czE(ua); 


(让 它 是 正 的 ， 即 u > 0 副 含 E(u) > 0; ( 诞 ) 它 的 范 数 等 于 1, 即 0<V<1l 荐 含 Eln) < 1， 
但 对 每 个 e > 0, 存在 一 个 4, 使 得 0O<u<1 且 


E(w) >1—e. 


那么 存在 唯一 的 一 个 概率 分 布 下 使 (1.14) 式 成 立 . 

证 对 任意 的 t 和 h >0, 用 zn 表示 z 的 满足 下 列 条 件 的 连续 函数 : 它 当 z < t 时 等 于 
1, 当 z > t+h 时 等 于 零 ,在 中 间 的 区 间 t < z < t+h 上 是 线性 的 . 这 个 函数 在 无 穷 远 点 
不 等 于 零 , 但 是 我 们 可 以 利用 简单 的 逼近 来 定义 E(z,n). 选取 函数 lun| < 1, 使 E(un) 有 
定义 上 且 对 于 |z| < n, un(z) = zh(z). 如 果 mm > n, 那么 差 um 一 un 在 区 间 二 57 内 恒 等 于 
零 ,由 的 范 数 等 于 1 这 个 事实 可 知 , E(un 一 um) 一 0. 由 此 推出 , E(mn) 收敛 于 一 个 有 限 
极限 ， 这 个 极限 显然 与 nn 的 选择 无 关 . 因此 , 定义 E(z,s) = lim E(wn) 是 合理 的 . 容易 看 
出 , 即使 在 这 个 扩大 了 的 定义 域 中 , 泛 函 EB 也 具有 定理 中 所 要 求 的 3 个 性 质 . 


@ 这 个 注 讨论 一 个 从 概念 上 讲 很 有 意思 的 课题 , 但 是 我 们 在 下 文中 用 不 着 它 ,关于 另外 一 种 方法 见 
4.5 节 . 
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现在 令 及 GO = E(zta). 对 于 固定 的 h, 这 是 一 个 单调 函数 , 它 从 0 变 到 1. 它 是 连续 
的 , 因为 当 0 < 5 < 天时 , 差 ze+s.n 一 zt.h 的 图 形 是 一 个 高 为 5/h 的 三 角形 , 因此 FF 的 差 商 
以 1/h 为 界 . 当 h 一 0 时 , 函 才 及 单调 减少 趋 于 一 个 极限 ,我 们 把 这 个 极限 记 为 F. 我 们 
来 证 明 , F 是 一 个 概率 分 布 . 显然 , 下 是 单调 的 , 并 且 F( 一 00) = 0. 此 外 , F(t) > Fh(t 一 hh)， 
这 蕴含 F(oo) = 1. 还 需要 证 明 F 是 右 连续 的 . 对 于 给 定 的 上 和 e > 0, 选取 这 样 小 的 h, 使 
得 F(t) > F(t) 一 e. 由 Fh 的 连续 性 知道 , 对 于 充分 小 的 5, 有 


F(t) > Fhlt) —e> Falt+6)—2e> F(t+6)— 2e, 


这 就 证 明了 右 连 续 性 . 

设 “是 一 个 在 有 限 区 间 a,6 外 等 于 零 的 连续 函数 . 取 a = ao < al <…< an=b, 使 
得 在 每 个 子 区 间 王 =5max 内 , v 的 振幅 小 于 6. 如果 h 比 这 些 区 间 的 长 度 中 的 最 小 者 还 小 ， 
那么 


wn = DD uan)[zBn 一 zs (115) 


‘= 
是 一 个 逐 段 线性 函数 ,其 顶点 在 ak 和 ak 十 h 上 . 因为 u(ax) = un(ak), 所 以 |u 一 wn| < 2e. 
因此 |E(w) 一 E(wn)| < 2e. 但 是 当 hh 一 0 时 ， 


E(un) 一 交 war)F {ar-i ar}, (1.16) 
t= 

这 个 和 式 与 (1.14) 式 中 的 积分 之 差 小 于 e. 于 是 (1.14) 式 的 两 边 之 差 小 于 3e, 因此 (1.14) 
式 成 立 . 
注 f ”关于 独立 性 和 相关 性 ”统计 相关 理论 可 以 追溯 到 理论 尚 无 法 定形 、 随 机 独立 性 概念 
不 可 避免 地 要 带 有 神秘 色彩 的 时 候 . 那 时 人 们 知道 ,两 个 期 望 为 零 的 有 界 随机 变量 的 独立 
性 歼 含 E(XY) = 0, 但 是 在 一 开始 , 人们 认为 这 个 条 件 也 是 X 和 了 独立 的 充分 条 件 . 后 来 
和 人们 发现， 事实 并 非 如 此 ， 这 个 发 现 导致 人 们 去 寻求 使 不 相关 蕴含 随机 独立 性 的 条 件 ， 正 
如 经 常 发 生 的 那样 ,这 个 问题 的 历史 和 部 分 结果 的 光辉 很 容易 掩盖 下 面 的 事实 ， 即 用 现代 
方法 解决 这 个 问题 是 非常 简单 的 . 下 列 定理 包括 了 文献 中 用 种 种 困难 的 方法 证 明 过 的 各 种 
结果 . 
定理 ”为 使 随机 变量 X 和 了 独立 ， 当 且 仅 当 对 于 所 有 在 某 有 限 区 间 外 等 于 零 的 连续 函数 
4 和 vw， 都 有 


E(u(X).v(Y)) = E(u(X)): E(v(Y)). (1.17) 

证 条 件 的 必要 性 是 显然 的 . 为 了 证 明 充分 性 , 只 需 证 明 : 对 于 每 一 个 有 界 连续 函数 w, E(w) 

与 w 关于 一 对 与 X 和 Y 有 相同 分 布 的 独立 变量 的 期 望 相同 (1.17) 表明 ， 当 w 具 

有 w(X,Y) = u(X)v(Y) 的 形式 时 ， 上 述 结论 成 立 ， 每 个 有 界 连 续 函 数 w 都 可 用 形 如 

于 ckwr(CX)wk(Y) 的 线性 组 合 来 一 至 过 近 了. 取 极限 就 可 看 出 , 这 个 结论 对 于 任意 的 有 界 连 

续 函 数 ww 成 立 . > 
@ 见 8.10 节 中 的 习题 10. 
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5.2 预备 知识 


本 节 主要 对 与 Ri 中 的 概率 分 布 有 关 的 熟知 的 明显 的 东西 引进 术语 . 
与 在 离散 变量 的 情形 一 样 ， 只 要 E(X*) 存在 , 我 们 就 把 它 定义 为 随机 变量 X 
的 上 阶 无 . 所 谓 E(X*) 存在 , 是 指 积分 


EC = {stP{ar} (1) 


绝对 收敛 . 因此 , 为 使 E(X*) 存在 , 当 且 仅 当 E(|X*|) < oo. 我 们 称 最 后 这 个 量 为 
乱 的 大 阶 绝对 和 珑 (对 非 整 数 上 > 0 也 有 定义 ). 因为 当 0 < a <b 时 , lzl* < lz 十 1， 
所 以 5 阶 绝对 和 矩 的 存在 性 蕴含 所 有 阶 为 a <b 的 绝对 矩 的 存在 性 . 

如 果 X 的 期 望 为 m, 那么 我 们 称 匀 一 m 的 二 阶 矩 为 X 的 方差 : 


Var(X) = E((X 一 m)2) = E(X2) — m2. (2.2) 


它 的 性 质 和 在 离散 情形 的 性 质 一 样 . 特别 ,如果 XX 和 Y 独 立 , 那么 当 义 和 YY 的 方 
差 存 在 时 ， 
Var(X +Y) = Var(X)+ Var(Y). (2.3) 


[我 们 称 两 个 满足 (2.3) 的 变 基 是 不 相关 的 . 在 第 1 卷 第 9 章 中 曾经 证 明 过 , 两 
个 相依 变 二 可 以 是 不 相关 的 . ] 
我 们 以 前 常常 把 随机 变量 X 换 为 “缩减 变量 ” 


_X-m 


X* i 
o 


其 中 m = E(X), o? = Var(X). 物理 学 家 称 X* 是 “用 无 因 次 单位 表示 的 ”. 更 一 般 
地 说 ， 从 X 变 到 L(t 中 a > 0) 相当 于 原点 和 基 度 单位 的 变化 . 这 个 新 变量 
的 分 布 函数 为 F(az + 了). 在 许多 情况 下 , 我 们 实际 上 讨论 的 是 这 种 形式 的 分 布 的 
全 体 , 而 不 是 单个 的 代表 . 因此 , 为 了 方便 起 见 , 我 们 引入 : 
定义 1 ”我们 称 Ri 中 的 两 个 分 布 所 和 Fi 是 同一 类 型 的 9 , 如 果 FE(z) = 所 (az+ 
), 其 中 wa > 0. 我 们 把 a 称 为 尺度 因子 , 把 称 为 中 心 (或 位 置 ) 常数 . 

有 了 这 个 定义 , 我 们 就 可 以 使 用 像 “ 这 样 规定 的 中 心 , 使 它 的 期 望 为 0” 或 
“中 心 常数 不 影响 方差 ” 这 样 的 语句. 


@ 这 个 概念 是 六 钦 〔Khintehine) 引 入 的 ， 他 使 用 的 是 德 文 术语 Klasse， 但 在 英文 中 。a class of 
functions( 函 数 类 )” 已 有 确定 的 意义 . 


120 第 5 章 Rr" 中 的 概率 分 布 


我 们 定义 一 个 分 布 的 中 位 数 为 一 个 满足 F(é) > 3 F(€-) < 的 数 &. 它 未 
必 是 唯一 确定 的 ; 如 果 对 于 区 间 5 中 的 所 有 z, F(z) = 3 那么 每 个 这 样 的 z 都 
是 一 个 中 位 数 . 可 以 这 样 规定 一 个 分 布 的 中 心 , 使 得 0 是 它 的 一 个 中 位 数 . 

除 中 位 数 外 ,这 些 概念 都 可 以 搬 到 高 维 中 或 形 如 X = (X1,…,X) 的 随机 向 
基 上 ; 合适 的 向 量 记 号 已 在 3.5 节 中 引入 , 不 需要 改变 . 现在 , X 的 期 望 是 一 个 向 
量 , 方差 是 一 个 矩阵 . 

考察 分 布 函数 的 图 像 时 首先 注意 到 的 是 它 的 不 连续 点 和 常 值 区 间 ， 我 们 经 党 
需要 说 一 点 不 在 一 常 值 区间 中 . 我 们 引入 下 面 的 可 适用 于 各 维 空间 的 方便 术语 . 
定义 2 我 们 称 点 z 是 一 个 原子 ， 如 果 它 带 有 正 质量 . 我 们 称 它 是 已 的 增 点 ， 当 
且 仅 当 对 于 包含 z 的 每 个 开 区 间 也 ， 都 有 F{T} > 0 时 . 

我 们 称 分 布 已 集中 在 集合 A 上 ， 如果 余 集 A!' 的 概率 Ff4/] = 0. 

我 们 称 分 布 已 是 原子 型 的 ， 如 果 它 集中 在 它 的 原子 组 成 的 集合 上 . 
例 ”把 而 I 中 的 有 理 数 按 分 母 增加 的 次 序 排 成 一 个 数列 1,72,…. 设 下 对 mx 赋予 
概率 2-*， 那么 是 纯 原 子 型 的 . 但 是 应 注意 , 闭 区间 0,1 中 的 每 一 点 都 是 的 
增 点 . 

由 可 数 可 加 性 (1.7) 知 , 诸 原子 的 质量 之 和 不 能 超过 1， 从 而 至 多 只 有 一 个 原 
子 的 质量 大 于 至 多 只 有 两 个 原子 的 质量 大 于 等 等 . 因此 可 以 把 原子 排 成 一 
个 简单 序列 a1,a2,…, 使 相应 的 质量 减少 : pl > pz > …. 换 句 话说 ， 至 多 存在 可 
数 多 个 原子 . 

我 们 称 没有 原子 的 分 布 为 连续 分 布 . 如 果 有 原子 ， 则 用 Pi,pa,… 表示 它们 的 
质量 , 并 设 p= 民 px 是 它们 的 和 . 令 


F(z)=p7! 》 ph (2.4) 
Qk 
其 中 求 和 是 对 =o6,z 中 的 所 有 原子 进行 的 . 显然 , Fs 也 是 一 个 分 布 函数 , 我 们 称 它 
为 书 的 原子 型 分 量 . 如 果 了 = 1, 那么 分 布 F 是 原子 型 的 . 否则 就 令 g 二 1-p. 容 
易 看 出 , [F 一 pFs]/g = Fe 是 一 个 连续 分 布 , 因此 


F=pF, + gF. (2.5) 


是 两 个 分 布 函 数 的 线性 组 合 , 其 中 F, 是 一 个 原子 型 分 布 , F. 是 一 个 连续 分 布 . 如 果 
五 是 原子 型 的 , 那么 (2.5) 对 p = 1 和 任意 的 F. 成 立 ; 在 没有 原子 的 情形 下 , (2.5) 
对 p=0 成 立 . 因此 我 们 有 : 

车 尔 当 (Jordan) 分 解 定理 每 个 概率 分 布 都 是 由 一 个 原子 型 分 布 和 一 个 连续 分 
布 组 成 的 形 如 (2.5) 的 混合 ; 这 里 p>0,g>0,p+g=1. 
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在 原子 型 分 布 中 ， 有 一 类 分 布 由 于 明显 的 例外 而 有 时 要 妨碍 简单 的 公式 表述 . 
它 的 成 员 与 整 值 随机 变量 只 相差 一 个 尺度 因子 , 但 是 它们 是 如 此 经 常 地 出 现 , 以 致 
为 了 便于 引用 , 需要 给 它们 起 个 名 称 . 
定义 3 我 们 称 民 ! 中 的 分 布 忆 是 一 个 算术 分 布 ,P 如 果 它 集中 在 形 如 0, 土 和 , 土 2 和 A，……… 
的 点 全 上 . 我 们 称 具 有 这 个 性 质 的 最 大 的 入 为 五 的 步 长. 


5.3 密 度 


头 两 章 讨论 了 及 ! 中 的 这 样 的 概率 分 布 ,使 得 对 于 所 有 的 区 间 (因而 对 于 所 有 
的 集合 )， 


{4} = 人 vodz (8.) 


第 3 章 的 分 布 具 有 同样 的 形式 , 积分 是 关于 Rr 中 的 勒 贝 格 测度 (面积 或 体积 ) 进 
行 的 . 如 果 (3.1) 式 中 的 密度 p 集中 在 区 间 0, 1 上 , 则 (3.1) 取 形 式 


RH 全 = 人 eaUtaah (32) 


其 中 U 表示 在 0,1 上 的 均匀 分 布 . 上 一 公式 对 任意 的 概率 分 布 UV 都 有 意义 ， 当 
了 {66,50} = 1 时 , 它 定义 一 个 新 的 概率 分 布 F. 在 这 种 情形 下 , 我 们 称 p 是 下 关 
于 UU 的 密度 

在 (3.1) 式 中 , 测度 U 是 无 穷 的 ， 而 在 (3.2) 式 中 U{=65,56} = 1. 这 种 差别 不 
是 本 质 的 ， 因 为 可 以 把 (3.1) 式 中 的 积分 写成 一 系列 的 形 如 (3.2) 式 的 在 有 限 区 间 
上 的 积分 的 和 . 仅 当 UV 是 一 个 概率 分 布 或 勒 贝 格 测度 (如 在 (3.1) 式 中 ) 时 , 我 们 才 
利用 (3.2) 式 , 但 下 列 定义 是 一 般 的 . 
定义 ”我 们 称 分 布 尺 关于 测度 U 是 绝对 连续 的 ， 如果 它 具有 (3.2) 的 形式 . 在 这 
种 情形 下 , 称 9 为 瓦 关于 芯 的 密度 2. 

特殊 情形 (3.1)( 其 中 U 是 勒 贝 格 测度 ) 当然 是 最 重要 的 ,在 这 种 情形 下 ,我们 
称 ”是 一 个 “普通 ”密度 . 

我 们 现在 引入 缩写 式 


F{dz} = p(w)U{dz}. (3.3) 


@ 术语 格 点 分 布 也 许 更 为 常用 , 但 是 它 的 用 法 不 一 样 , 按照 一 些 作者 的 意见 , 格 点 分 布 可 以 集中 在 点 
集 a,a 土 和 a 十 2 和 \,… 上 , 其 中 a 是 任意 的 . (按照 我 们 的 术语 , 在 土 ] 上 具有 原子 的 二 项 分 布 是 
一 个 步 长 为 1 的 算术 分 布 , 但 是 据 另 外 一 种 定义 , 它 是 一 个 步 长 为 1 的 榈 点 分 布 . ) 

@ 在 测度 论 中 , 称 p 为 下 关于 UU 的 拉 东 - 尼 科 迪 姆 (Radon-Nikodym) 导数 . 
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这 只 是 一 个 表示 (3.2) 式 对 所 有 集合 成 立 的 速写 记号 , 其 中 dz 没有 什么 意义 . 利用 
这 个 记号 , 可 把 (3.1) 式 缩写 为 F{dz} = p(z)dz. 如 果 U 有 一 个 普通 的 密度 4, 那 
么 (3.2) 式 与 F{dzj = yp(z)u(z)dz 具有 相同 的 意义 . 

例 (a) 设 U 是 Ri 中 的 一 个 概率 分 布 , 它 的 二 阶 矩 为 m2. 那么 


Ff{dz} = 示人 UV{dz} 


是 一 个 新 的 概率 分 布 ， 特 别 ， 如 果 U 是 TI 中 的 均匀 分 布 ， 那 么 对 于 0 < z < 
1 F(x) = r?; 如 果 以 有 密度 e-“(z > 0), 那么 是 具有 普通 密度 5zae- 的 工分 
布 
例 (b) ” 设 U 是 一 个 原子 型 分 布 , 它 对 a1,a2,… 赋予 质量 pt,pz,…( 其 中 并 mk = 
1)， 为 使 分 布 F 关于 U 有 密度 w， 当 且 仅 当 它 是 纯 原子 型 分 布 ， 且 它 的 原子 在 
02,… 中 ,如果 玉 对 由 赋予 质量 ,那么 密度 y 为 lah) = 些 .p 在 其 他 点 上 
的 值 不 起 作用 ,除了 在 原子 上 以 外 , 最 好 不 定义 的 值 > 

从 理论 上 讲 , (3.2) 式 中 的 被 积 函数 p 不 是 唯一 确定 的 ; 因为 如 果 N 是 一 个 使 
得 U{N} = 0 的 集合 , 那么 可 以 以 任意 方式 在 N 上 重新 定义 p 而 不 影响 (3.2) 式 . 
但 这 是 唯一 的 一 种 不 确定 性 , 除 了 在 一 个 堆 测 集 上 的 值 外 ， 密 度 是 唯一 确定 的 .在 
实际 中 ,唯一 的 选择 通常 是 由 连续 性 条 件 支配 的 , 因此 ,我 们 通常 讲 “ 这 个 ” 密度， 
虽然 讲 “一 个 " 密度 更 精确 . 

对 于 任 一 有 界 函数 v, 关系 式 (3.3) 显然 比 含 @ 


u(z)Ffdz} = utz)p(z)Tfdz]. (3.4) 


特别 地 ,如 果 p 取 9 以 外 的 有 界 值 ， 那么 我 们 可 以 选取 v = p-!， 从 而 得 到 (3.2) 
的 反 演 公式 
1 
pz) 
。 @ 事实 上 , 如 果 w 和 pi 都 是 玉 关于 [ 的 密度 ,那么 考察 所 有 使 得 p(z) > pitz) 十 e 的 点 二 所 成 
的 集合 A. 由 


U{dz} = 一 _F{dz}. (3.5) 


P{4} = 人 oo)otdzl = f vito {dr} 
A a 
推出 U{4} = 0, 因为 这 对 于 每 个 。 > 0 都 成 立 , 所 以 我 们 看 出 , 除了 一 个 使 U{N} = 0 的 集合 
和 外, 9(z) = 91(z)- 

@ 对 新 积分 感到 难以 理解 的 读者 应 当 注 意 , 在 连续 密度 的 情形 下 , (3.4) 化 为 熟知 的 积分 代 换 法 划 . 下 
面 的 在 一 般 情形 下 的 证 明 ， 利 用 了 一 个 可 适用 更 一 般 情形 的 标准 论证 ， 当 v 是 简单 函数 时 ， 即 它 
仅 耻 有 限 多 个 什 时 ， 公式 (3.4) 显然 成 立 ， 对 每 一 个 有 界 函数 v, 存在 丙 个 简 间 本 数 和 5 使 得 
和 <v < 可 一 上 < 因此， (3 对 所 有 简单 了 数 成 立 就 理 全 着 它 在 一 般 情形 下 的 正确 性 
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一 个 常用 的 绝对 连续 准则 包含 在 测度 论 的 一 个 基本 定理 中 ,我 们 不 加 证 明 地 
承认 这 个 定理 . 
拉 东 - 尼 科 迪 姆 (Radon-Nikodym) 定理 了 已 关于 U 是 绝对 连续 的 ， 当 且 仅 当 
U{4} = 0 时 

F{A} =0. (3.6) 

这 个 表达 式 可 用 下 列 陈 述 来 表达 : U 零 集 也 是 下 零 集 . 我 们 给 出 一 个 重要 的 
推论 ， 虽 然 在 本 书 中 没有 明显 地 用 到 它 . 
准则 “已 关 于 U 是 绝对 连续 的 ， 当 且 仅 当 对 于 每 个 。 > 0, 有 一 个 5 > 0, 使 得 对 
任意 一 组 不 相交 区 间 厂 ,…, I， 


并 U{I} <5 蕴含 bpD F{Ik} <e. (3.7) 
1 
一 个 重要 的 特殊 情形 是 对 于 所 有 区 间 有 
F{I} < a:U{T}. (3.8) 


于 是 (3.4) 对 5 = 5 成 立 . 容易 看 出 ， 在 这 种 情形 下 , 严 有 一 个 关于 U 的 密度 w， 
使 得 p <a. 


奇异 分 布 * 


拉 东 - 尼 科 迪 姆 定理 的 条 件 (3.6) 导致 我 们 研究 绝对 连续 分 布 的 极端 相似 物 . 
定义 ” 称 概率 分 布 已 关于 U 是 奇异 的 ， 如 果 它 集中 在 一 个 使 U{N} = 0 的 集合 
NL. 

勒 贝 格 测度 U{dz} = dz 起 着 一 个 特殊 的 作用 ,在 没有 进一步 的 限制 下 ,“ 奇 
异 "” 一 词 就 是 指 关于 它 是 奇异 的 . 每 个 原子 型 分 布 关 于 dz 都 是 奇异 的 ,但 是 1.11 
节 例 (d) 的 康 托 尔 型 分 布 表 明 , 在 R! 中 存在 这 样 的 连续 分 布 , 它们 关于 dz 是 奇 
异 的 . 这 样 的 分 布 不 易 用 微 积分 的 方法 进行 处 理 , 它 的 明显 表达 式 实际 上 是 不 可 能 
的 . 因此 , 为 了 分 析 的 目的 , 我 们 不 得 不 选取 一 个 可 导致 连续 分 布 或 原子 型 分 布 的 
框架 , 但 是 从 概念 上 讲 , 奇异 分 布 起 着 重要 的 作用 , 许多 统计 检验 依赖 于 它 的 存在 
性 . 这 种 情况 被 奇异 分 布 “ 实 际 上 ”不 发 生 这 一 陈 词 滥 调 所 掩盖 . 

@ 通常 称 为 勒 贝 格 - 尼 科 迪 姆 (Lebesque-Nikodym) 定理 . 关系 式 (3.6) 可 以 作为 绝对 连续 性 的 定 

义 . 在 这 种 情形 下 , 定理 断言 了 密度 的 存在 性 . 
* 虽然 从 概念 上 讲 奇 异 分 布 很 重要 , 但 在 本 书 中 只 是 附带 地 提 一 下 . 
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例 (c) ” 伯 努 利 试验 . 在 1.11 节 例 (c) 中 曾经 指出 , 可 以 通过 把 S 和 下 分 别 换 为 1 
和 0 这 一 简单 方法 , 把 由 序列 SS9… 王 … 组 成 的 样本 空间 映 到 单位 区 间 上 . 于 是 单 
位 区 间 成 了 样本 空间 , 无 穷 试验 序列 的 结果 可 用 随机 变量 Y = 于 2-*Xk 表示 , 其 
中 Xk 是 以 概率 p 和 g 取 值 1 和 0 的 独立 变量 . 用 Fy 表示 Y 的 分 布 . 对 于 对 称 的 
试验 , Fy 是 一 个 均匀 分 布 , 这 个 模型 由 于 其 简单 性 而 引 人 注目 . 事实 上 , 从 概率 论 
创始 以 来 ， 人 们 就 一 直 利用 着 对 称 伯 努 利 试验 与 “在 1 中 随机 地 选取 一 点 ” 的 等 
价 性 . 现在 根据 大 数 定律 , 分 布 Fs 集中 在 由 这 样 的 点 组 成 的 集合 Np 上, 使 得 在 它 
们 的 二 进 制 展开 式 中 数字 1 的 频率 趋 于 2D. 当 2p 关 ca 时 , 集合 Na 的 概率 为 0, 因为 
分 布 天 是 相互 奇异 的 ; 对 于 卫 关 5, 分布 F 关于 均匀 分 布 dz 是 奇异 的 . F 的 明 


显 表达 式 是 不 适用 的 . 因此 , 当 p 了 时 ,此 模型 不 被 普遍 使 用 . 有 两 点 值得 注意 . 


第 一 考虑 一 下 ,如 果 特 殊 值 p = 3 有 特殊 的 意义 或 在 应 用 中 经 常 出 现 ， 那 
么 将 发 现 什么 情况 . 我 们 把 数 的 二 进 制 表达 式 换 成 三 进 制 展开 式 , 并 引入 一 个 新 尺 
度 ,使 Fi 和 均匀 分 布 重合 “实际 上 ”我们 仍然 只 讨论 绝对 连续 分 布 ， 但 其 理由 在 
于 所 用 的 工具 的 选择 ， 而 不 在 于 事物 的 本 质 . 

第 二 , 硬币 是 否 均 勾 可 用 统计 学 的 方法 进行 检验 . 实际 的 必然性 可 以 通 寺 有限 
次 试验 得 到 ,这 是 可 能 的 ， 因 为 在 假设 p = 5 可 能 发 生 的 现象 ,在 假设 p= 3 是 极 
不 可 能 发 生 的 . 沿 着 这 条 线路 稍 做 思考 就 可 发 现 ,之 所 以 能 名 在 有 限 次 试验 后 作出 
决定 是 由 于 下 列 事实 , 关于 局 是 奇异 的 【只 要 p 关 二 因此 , 奇异 分 布 的 存在 
性 对 于 统计 学 的 实践 是 非常 重要 的 . 

例 (9) 随机 方向 R? 中 具有 随机 方向 的 单位 向 二 的 概念 是 在 1.10 节 中 引进 的 . 
这 种 向 量 的 分 布 集中 在 单位 四周 上 ， 因 而 它 关 于 平面 上 的 勤 贝 格 测度 (面积 ) 是 奇 
异 的 . 有 人 可 能 说 , 在 这 种 情况 下 ， 应 把 图 周作 为 样本 空间 ， 但 是 实际 的 问题 有 时 
使 这 种 选择 是 不 可 能 的 - 

勒 贝 格 分 解 定理 每 一 个 概率 分 布吉 是 一 个 下 列 形式 的 混合 : 


F=p. Fs+g: Fac, (3.9) 


其 中 p>0,g>0,p+g 二 1. FF 是 一 个 关于 给 定 的 测度 [奇异 的 概率 分 布 ，Fuc 是 
一 个 关于 U 绝对 连续 的 概率 分 布 . 

把 车 尔 当 分 解 式 (2.5) 应 用 于 F, 可 知 , 严 可 以 写成 3 个 概率 分 布 的 混合 ,其 
中 第 1 个 是 原子 型 分 布 ,第 2 个 是 关于 U{dz} 绝对 连续 的 分 布 , 第 3 个 是 一 个 连 
续 但 奇异 的 分 布 . 

证 ”为 了 使 叙述 简单 ,我 们 把 使 得 U{N} = 0 的 集合 N 称 为 零 集 . 设 p 是 F{N}. 
对 于 所 有 零 集 N 的 上 确 界 . 对 于 每 个 w 存在 一 个 零 集 Ns, 使 得 F{Ns} >p 一 上 . 
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于 是 对 余 集 N 中 的 任 一 零 集 4 P{4} < 二. 对 于 并 集 N = U Nu, 这 昔 含 UN] = 
0, FP{N} =p, 因而 余 集 N' 中 的 任 一 零 集 的 概率 为 0. | 

如 果 p=1, 则 下 是 奇异 的 , 而 p=0 表示 斑 是 绝对 连续 的 . 当 0<p<1 时 ， 
结论 对 于 由 下 式 定义 的 两 个 概率 分 布 是 正确 的 ， 


Pp: Fo{A}= F{AN}, q: Fac{A} = F{AN')}. (3.10) w 


5.4 卷 积 


在 许多 数学 分 支 中 , 卷 积 是 非常 有 用 的 . 我 们 必须 用 两 种 方式 讨论 卷 积 : 一 个 
是 作为 分 布 之 间 的 运算 , 另 一 个 是 作为 一 个 分 布 与 一 个 连续 函数 之 间 的 运算 . 

为 了 确定 起 见 ， 我们 只 对 了: 中 的 分 布 进行 讨论 , 但 是 利用 5.1 的 向 量 记 号 ， 
诸 公 式 与 维 数 无 关 . 圆周 上 的 郑 积 的 定义 可 仿照 2.8 节 中 所 述 的 方式 给 出 ,不 需要 
说 明 . (更 一 般 的 卷 积 可 以 定义 在 任意 的 群 上 . ) 

设 下 是 一 个 概率 分 布 ,wp 是 一 个 有 界 点 函数 ，( 在 我 们 的 应 用 中 , yp 或 者 是 一 
个 连续 函数 , 或 者 是 一 个 分 布 函数 . ) 那么 用 


+o0 
wo)= /vle -Wray (4 
定义 一 个 新 函数 u. 如 果 民有 一 个 (关于 dz 的 ) 密度 f, 那么 上 式 化 为 
+o0 
ua)= /ve -Dray. (4.2) 


定义 1 一 个 函数 yp 与 一 个 概率 分 布 已 的 卷 积 是 由 (4.1) 式 定义 的 函数 .我们 把 
它 表 示 为 以 二 FF 友 p. 当 已 有 一 个 密度 有 时 ,我 们 还 可 写成 二 * wp. 

注意 , 项 的 次 序 是 很 重要 的 : 符号 p 妇 F 一 般 说 来 是 无 意义 的 . 另 一 方面 , (4.2) 
对 于 任意 可 积 的 f 和 yp( 即 使 f 不 是 非 负 的 ) 都 有 意义 ,我 们 在 这 种 一 般 化 了 的 意 
义 上 使 用 符号 *. 不 用 说 , p 的 有 界 性 只 是 为 了 简单 起 见 而 假设 的 ,并 不 是 必需 的 . 
例 (a) ”当下 是 a 中 的 均匀 分 布 时 ， 


wu(z) =a-! [ p(s)ds. (4.3) 


由 此 推出 v 是 连续 的 ;如 果 ” 是 连续 的 , 那么 u 有 一 个 连续 导数 ， 等 等 . 一 般 说 
来 , v 的 性 质 比 p 的 性 质 好 ,因而 卷 积 起 一 个 光滑 算 子 的 作用 . 

例 (b) ”关于 指数 分 布 以 及 均匀 分 布 的 卷 积 公式 [1.3 节 (3.6) 和 1.9 节 (9.1)] 是 一 
些 特殊 情形 . 关于 R? 中 的 例子 见 3.1 节 (1.22) 和 第 3 章 的 习题 15~ 习 题 17.。 > 
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定理 1 如 果 p 是 一 个 有 界 连续 函数 ,那么 由 一 下 女 p 也 是 一 个 有 界 连 续 函 数 ; 如 

果 只 是 一 个 概率 分 布 函 数 ， 那 么 由 也 是 一 个 概率 分 布 画 数 . 

证 “如果 是 一 个 有 界 连续 函数 , 那么 根据 控制 收敛 定理 , u(z +h) 一 u(z). 同 

理 , 9 的 右 连续 性 获 含 v 的 右 连 续 性 . 最 后 , 如果 yp 从 0 单调 增加 到 1, 那么 4 也 

显然 如 此 . > 
当 92 是 一 个 分 布 函数 时 , 下 列 定理 给 出 了 玉 太 y 的 一 种 解释 . 

定理 2 设 久 和 YY 是 具有 分 布下 和 G 的 独立 随机 变量 ， 则 


P{X+Y <t}= / cd _ a)F{dz}. (4.4) 


证 9 取 e>0, 用 表示 区 间 ne<z< (n+1)e, 这 里 n=0, 土 1,…, 如 果 对 于 某 
个 n,XEIni,Y<t-ne, 那么 事件 {X+Y << 届 发 生 . 前 两 个 事件 是 互 斥 的 , 因 
为 XX* 和 YY 独立 , 所 以 我 们 有 


P{X+Y <t} < DG(t—ne): FP{In}. (4.5) 


右 端 是 在 I 中 取 值 G(t 一 ne) 的 阶梯 函数 Ge 的 积分 . 因为 Ge(y) < G(t + 一 9)， 
所 以 


P{X+Y <t} < 站 ee+e-aPtar (4.6) 


把 < 换 成 -e, 利用 同样 的 论证 可 得 到 相反 的 不 等 式 . 令 e 一 0， 我 们 就 得 到 (4.4) 
式 . p 
例 (c) 设 已 和 G 集中 在 整数 0,1,2,… 上 , 用 pk 和 9k 表示 此 的 质量 那么 
(4.4) 中 的 积分 化 为 和 并 G(t 一 ps， 这 是 一 个 当 t < 0 时 等 于 0 而 在 每 个 区 间 
n 一 1 <t<n 中 都 为 常数 的 函数 . 它 在 t=n 上 的 跳跃 等 于 


a 
DD nkpk = qnpo + qn-ip1 + + + gopns (4.7) 
er 


这 与 第 1 卷 11.2 节 (2.1) 整 值 随机 变量 的 卷 积 公式 一 致 > 
上 述 每 个 定理 表明 ， 对 于 两 个 分 布 函 数 ， 卷 积 运算 产生 一 个 新 的 分 布 函 数 U. 
加 法 XX 十 Y 的 变换 律 比 含 F 太 G = G 克 下. 一 个 完备 的 系统 也 许 要 对 这 种 分 布 函数 


@ (4 是 4.2 节 (2.11) 富 比 尼 定 理 的 一 个 特殊 情形 , 定理 2 的 逆 不 真 : 我 们 在 2.4 节 (e) 和 3.9 节 
的 习题 1 中 看 到 ,在 个 别 的 情形 下 , 公式 (4.4) 对 一 对 相依 变量 X, Y 也 可 能 成 立 . 
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之 间 的 卷 积 引 入 一 个 新 的 符号 , 但 这 几乎 没有 什么 用 处 . ?当然 , 我 们 应 把 U 看 作 
区 间 函 数 或 测度 : 对 于 每 个 区 间 工 = a,6, 显然 有 


vn= eu-wrtv, (4.8) 


其 中 , 与 通常 一 样 , 一 y 表示 区 间 a 一 y,5 一 y. (这 个 公式 可 以 搬 到 任意 集合 上 . ) 
由 交换 律 得 知 , (4.8) 式 中 和 G 的 位 置 是 可 交换 的 . 
现在 考虑 3 个 分 布 及 ,Fz, Fa. 随机 变量 的 加 法 的 结合 律 草 含 (下 六 瑟 ) 太 Fs = 
太太 ( 丽 友 瑟 )， 因 而 可 以 去 掉 小 括号 ， 写 成 及 克 瑟 克己. 我 们 把 这 个 总 结 在 定理 3 
和 定理 4 中 . 
定理 3 在 分 布 中 , 卷 积 运 罩 真 满足 交换 律 和 结合 律 . 
定理 4 如果 G 是 连续 的 (= 无 原子 的 ), 那么 U = 下 娘 G 也 是 连续 的 . 如 果 G 有 
一 个 普通 密度 p,， 那么 U 有 一 个 普通 密度 u， 它 由 (4.1) 给 出 . 
证 第 一 个 断言 包含 在 定理 1 中 . 如 果 yp 是 G 的 密度 , 那么 在 区 间 工 上 积分 (4.1) 
就 可 得 到 (4.8), 因而 v 确实 是 (4.8) 所 定义 的 分 布 0 的 密度 . p 
特别 ,由 此 推出 ,如果 F 和 G 有 密度 f 和 g, 那么 卷 积 F 太 G 有 一 个 如 下 的 
密度 h= 了 *g: 


n= [tte -wear (49) 


一 般 说 来 , h 的 光滑 性 比 了 和 9 的 都 好 . (见习 题 14.) 

nn 个 具有 共同 分 布 F 的 相互 独立 的 随机 变量 之 和 Sn = Xi 十 … 十 Xn 如 此 经 
常 地 出 现 , 以 致 于 需要 引入 一 个 特殊 的 记号 . Sn 的 分 布 是 与 它 本 身 的 n 重 卷 积 . 
我 们 把 它 表示 为 F"*. 因此 


Fi#*= FE Frnt) = Fr" 女 忆 (4.10) 


我 们 习惯 上 把 不 包含 项 的 和 式 解释 为 0. 为 了 一 致 起 见 , 我 们 把 Fo* 定义 为 集中 在 
原点 上 的 原子 型 分 布 . 于 是 (4.10) 对 n = 0 也 成 立 . 
@ 换 句 话说 , 当 积分 是 关于 测度 A 进行 时 ,我 们 使 用 符号 A 妈 B. 根据 B 是 点 函数 [如 在 (4.1) 中 
或 测度 [各 在 (4.6) 中 ], 这 个 卷 积 也 是 点 务 数 或 测度 . 我 们 用 星 呈 * 表示 两 个 函数 之 间 的 运算 , 积 
分 是 关于 勒 册 格 测度 进行 的 . 在 本 书 中 , 这 类 卷 积 几乎 仅 限于 概率 密度 
两 个 函数 之 问 的 卷 积 的 更 一 般 的 定义 可 以 定义 为 


He 
f+9)= 人 ye-oog)mtath， 
其 中 m 表示 一 个 任意 的 测度 . (4.7) 中 的 和 表示 这 样 一 个 特殊 情形 , m 集中 在 正 整数 上 ,对 每 个 正 


整数 赋 于 单位 质量 . 在 这 个 意义 上 , 在 第 1 卷 11.2 节 中 对 序列 之 间 的 卷 积 应 用 星 号 与 我 们 现在 的 
用 法 是 一 致 的 
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如 果 FF 有 一 个 密度 f, 那么 F"* 有 密度 了 * 了 + …*f(n 次 ). 我 们 用 f” 来 表 
示 它 . 这 些 记号 与 1.2 节 中 引入 的 记号 一 致 . 


注 “下列 例子 表明 ， 两 上 奇异 分 布 的 卷 积 可 能 有 一 个 连续 密度 . 它们 还 表明 ， 卷 积 的 实际 
计算 不 一 定 以 定义 公式 为 基础 . 

例 (d) I 中 的 均匀 分 布 是 两 个 康 托 尔 型 奇异 分 布 的 卷 积 . 事实 上 设 XX1,X2,… 是 一 列 
独立 同 分 布 的 随机 变量 ，Xx (k = 1,2,…) 取 值 为 0 和 1 的 概率 都 是 5 我 们 在 111 节 例 
(c) 中 曾 看 到 , 变量 X = 并 2 习 Xx 的 分 布 是 均匀 的 . 我 们 分 别 用 UV 和 V 表示 偶数 项 和 奇 
数 项 的 贡献 . 显然 , U 与 V 独立 , X = U+V. 因此 , 均匀 分 布 是 UV 和 V 的 分 布 的 卷 积 . 但 
是 , U 和 2Y 显然 有 相同 的 分 布 , 变量 V 与 1.11 节 例 (d) 中 的 变量 3Y 只 是 记号 不 同 . 换 
句 话说, U 和 V 的 分 布 与 该 例 中 的 康 托 尔 分 布 的 不 同 之 处 仅 在 尺度 因 于 上 . 

例 (e) BR? 中 的 随机 向 量具 有 随机 方向 的 单位 向 量 的 分 布 集中 在 单位 圆周 上 . 因而 关于 
平面 上 的 勒 贝 格 测度 是 奇异 的 . 然而 , 两 上 独立 向 量 的 合 向 量 的 长 度 为 L, 工 是 一 个 集中 在 


5 上 的 具有 密度 -7 的 随机 变量 ， 事 实 上 ， 根 据 余下 定 理 了 = V2 一 3005 5 = 


2 sin 引 中 其 中 w 是 两 个 向 量 间 的 夹 角 . 由 于 服从 厨 t 中 的 均 勾 分布， 所 以 我 们 有 


Pi<n=P{h singo| <7} = Zare sin dn, 0<r<2， (4.11) 


这 就 证 明了 断言 . (见习 题 12.) 


关于 增 点 


这 里 必须 打 断 正在 进行 的 讨论 ,以 便 例 中 的 记录 下 关于 F 妇 G 的 增 点 的 一 些 基本 事实 . 
第 1 个 引 理 在 直观 上 是 明显 的 , 而 第 2 个 引 理 是 技巧 性 的 . 我 们 只 在 更 新 理论 中 应 用 它 , 从 
而 在 随机 游 动 理论 中 间接 地 利用 它 、 
引 理 1 如 果 a 和 是 分 布 和 G 的 增 点 ,那么 a+b 是 下 砍 G 的 增 点 . 如果 a 和 日 是 原 
子 , 那么 a 十 b 也 是 一 个 原子 . 此 外 ,下 次 G 的 所 有 原子 都 是 这 种 形式 的 . 
证 如 果 久 与 Y 独立 , 那么 


PAX+Y -ead<d>P {x-al<$e)}-P {Yu< 3e). 


如 果 a 和 bb 是 增 点 , 则 对 每 个 。 > 0, 右边 都 是 正 的 , 因此 a + b 也 是 一 个 增 点 . 

用 F。 和 G。 表示 在 若 尔 当 分 解 式 (2.5) 中 FF 和 G 的 原子 型 分 量 . FF 太 G 的 原子 型 分 量 
显然 与 着 积 Fa 娘 G。 相同 , 因此 F 太 G 的 所 有 原子 都 具有 形式 a 十 b, 其 中 a 和 5b 分别 是 下 
和 G 的 原子 . > 

算术 分 成 所 起 的 特殊 作用 和 正 变量 所 起 的 特殊 作用 , 都 使 下 列 引 理 的 固有 的 简单 性 受 
到 影响 . 
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引 理 2 设 已 是 了: 中 的 一 个 分 布 ,， 巴 是 书 ，F2 太 ，Fsk ，.… 的 增 点 所 成 的 集合 . 

(a) 如 果 亚 不 集中 在 一 个 半 轴 上 ， 那 么 当 书 不 是 算术 分 布 时 ,， 呈 在 55155 中 是 稠密 
的 ; 当 已 是 一 个 步 长 为 入 的 算术 分 布 时 , 呈 = {0, 士 N\ 士 2A… 小 - 

(b) 设 已 集中 在 D00 上 ,但 不 集中 在 原点 上 . 如 果 F 不 是 算术 分 布 , 那么 呈 在 下 述 
意义 上 是 “在 无 穷 远 处 渐 近 秽 密 的 ": 对 于 给 定 的 < > 0 和 充分 大 的 7, 区 间 五 5 下 E 包含 了 
的 点 . 如 果 玉 是 一 个 步 长 为 A 的 算术 分 布 ， 那么 对 于 充分 大 的 n, 区 包含 所 有 的 点 nA 和. 
证 设 0<a<b 是 集合 人 中 的 两 个 点 , 令 h=b 一 a. 我 们 区 别 两 种 情形 ， 

(i) 对 于 每 个 e > 0, 可 以 选取 这 样 的 a,b, 使 h < 6 

(Gi) 存在 5 > 0, 使 得 对 于 所 有 可 能 的 选择 都 有 h > 5 

设 I 表示 区 间 na < znb. 如 果 n(b 一 a) > a, 那么 这 个 区 间 包 含 na, (n 十 1)* 作为 
其 真子 区 间 , 因此 每 个 点 > > zo = 5 至 少 属于 区 间 用, 12,… 之 一 根据 引 理 lm 十 1 
个 点 na 十 kh(k = 0,1,.…,n) 属于 了 ,这些 点 把 I 分 成 n 个 长 度 为 的 于 区间 . 因此 , 每 
个 点 = > zo 都 位 于 耻 的 一 个 点 的 距离 < 的 地 方 


在 (i) 的 情形 下 , 这 含 了 在 无 穷 远 处 是 渐 近 稠密 的 . 如 果 这 时 集中 在 0,00 上 , 则 
结论 证 毕 . 否则 令 -c > 0 是 已 的 一 个 增 点 . 对 任意 的 y 和 充分 大 的 n, 区 间 


nc+y<z<nctyte 


包含 号 的 一 点 s. 因为 s 一 nc 仍 属于 卫 ， 所 以 每 个 长 度 为 的 区 间 都 包含 号 的 一 些 点 , 因 
而 号 是 处 处 稠密 的 ， 

在 (i 的 情形 下 , 我 们 可 以 假设 a 和。 是 这 样 选择 的 ， 以 致 于 h < 26. 于 是 由 此 推出 ， 
形 如 na + kh 的 点 包括 了 工 在 I 中 的 所 有 的 点 . 因为 (n + 1)a 是 这 些 点 中 的 一 个 ， 所 以 
也 在 In 中 的 所 有 点 都 是 h 的 倍数 . 现在 设 c 是 下 的 任 一 ( 正 的 或 负 的 ) 增 点 . 对 于 充分 大 
的 n, 区 间 I, 包含 一 个 形 如 kh 十 c 的 点 ; 由 于 这 个 点 属于 了 ,所 以 c 是 hh 的 倍数 . 因此 ， 
在 (i) 的 情形 下 ,FF 是 算术 分 布 . 和 

这 个 定理 的 一 个 特殊 情形 是 很 有 意思 的 . 每 个 数 z > 0 可 以 唯一 地 表示 为 一 个 整数 mm 
与 一 个 数 0 < & < 1 的 和 的 形式 z = n+. 我 们 称 这 个 为 x 的 小 数 部 分 . 现在 考虑 一 
个 集中 在 两 点 -1 和 a > 0 上 的 分 布 F. 集合 荆 包 含 形 如 na 一 m 的 所 有 的 点 ,从 而 包含 
a,2a,… 的 小 数 部 分 . 如 果 a = 2 其 中 p 和 4 是 两 个 互 质 的 正 整数 ,那么 这 个 下 是 一 个 
算术 分 布 . 在 这 种 情况 下 , FF 的 步 长 等 于 # 因此 ,我 们 有 下 列 的 系 (在 8.7 节 的 等 分 布 定 
理 中 将 被 加 强 ). 

村 ”如果 a > 0 是 一 个 无 理 数 ， 那 么 由 a,2a,3a,… 的 小 数 部 分 组 成 的 集合 在 而 I 中 稠 
密 . 


5.5 对 称 化 
如 果 随机 变 理 X 的 分 布 为 F, 那么 我 们 用 -下 表示 一 X 的 分 布 . 在 连续 点 上 
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我 们 有 
-F(z)=1— F(z), (5.1) 
这 个 关系 式 唯一 地 确定 了 -下 . 我 们 称 分 布 F 为 对 称 的 , 如 果 -下 = 已 [ 当 密 度 了 
存在 时 , 这 表示 f(z) = f(z). ] 
设 Xi 和 X2 是 具有 共同 分 布 F 的 独立 变量 , 那么 Xi - X2 的 分 布 是 下 列 对 
称 分 布 OF: 


oF = FA-F. (5.2) 
利用 对 称 性 %F(z) = 1 -0 F(z), 容易 看 出 
+o0 
p= Feet rtay). (5.3) 
我 们 将 称 %F 是 通过 把 对 称 化 得 到 的 . 


例 (a) ”指数 分 布 的 对 称 化 导致 双 侧 指数 分 布 [2.4 节 (a)]; 0,T 上 的 均匀 分 布 的 对 
称 化 导致 2.4 节 (4.1) 的 三 角形 分 布 72. 

例 (b) 在 十 上 具有 质量 为 5 的 原子 型 分 布 是 对 称 的 , 但 不 是 经 过 对 称 化 得 到 
的 . 

例 (c) 设 忆 是 一 个 原子 型 分 布 , 对 0,1,… 赋予 质量 po,p1,…. 对 称 化 了 的 分 布 
?°F 是 一 个 原子 型 分 布 , 点 +n 具有 质 其 


Gn = DPkpktn, qn = gn. (5.4) 
k=0 
当 FF 是 泊 松 分 布 时 , 对 n > 0, 我 们 有 
1 
qn =e mr =e In(20), (5.5) 
Ri(n + Al 


其 中 是 在 2.7 节 (7.1) 中 定义 的 贝 塞 尔 函 数 .( 见 习题 9. ) 

利用 对 称 化 可 以 避免 许多 凌乱 的 论证 . 在 这 方面 , 重要 的 是 FF 的 尾部 和 ?°F 的 
尾部 可 比较 大 小 , 用 下 列 不 等 式 可 使 这 个 陈述 更 为 精确 . 当 用 随机 变量 而 不 用 分 布 
本 身 来 表示 这 些 不 等 式 时 , 它们 的 意义 就 更 清楚 . 
引 理 1 对 称 化 不 等 式 . 如 果 Xi 和 X2 是 独立 同 分 布 的 ， 那么 对 于 t > 0， 


P{IX1 — Xal >t} <2P {a > 计 : (5.6) 
如 果 这 样 选择 a > 0, 使 P{Xi < 4} >p, P{Xi > a) >p, 那么 


P{|X1 — X2i > t} > pP{|X1| > t+ a}. (5.7) 
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特别 ， 如 果 0 是 Xi 的 一 个 中 位 数 ， 那么 
P{IX1— Xol>}> BP{ixl > (5.8) 


证 除非 Xl > 六 或 Xs| > 北 ， 否则 (5.6) 左边 的 事件 不 可 能 发 生 ， 因 此 
(5.6) 是 正确 的 . 如 果 X! > t+ a，Xo < a， 那 么 (5.7) 左边 的 事件 发 生 ， 如 果 
Xi < -t 一 a, Xs > -a, 那么 (5.7) 左边 的 事件 也 发 生 . 这 比 售 (5.7). > 

我 们 常用 对 称 化 来 估计 独立 随机 变 基 的 和 . 在 这 方面 ,下 列 不 等 式 是 非常 有 用 


的 . 
引 理 2 ”如果 X2,…,Xn 是 独立 的 ,， 且 都 有 对 称 的 分 布 ， 那 么 Sn 一 XI 十 … 十 Xn 
也 有 对 称 的 分 布 ， 且 


P{ba + 十 Xi > 喘 > 了 (maxlxl > 十 (5.9) 
如 果 Xj 有 共同 分 布 成， 那么 
P{|X1+:…+Xn|>t} > Ba =e"h=-F()-r(-)). (5.10) 


证 设 随 机 变 基 M 等 于 X1,… ,Xn 中 使 绝对 值 达到 最 大 的 第 一 项 , 并 令 了 = 
Sn 一 M. 在 4 个 组 合 (二 M 士 7) 有 相同 分 布 的 意义 下 ,对 偶 (M,T) 的 分 布 是 对 称 
的 . 显然 


P{M>t} <P{M>4T>0}+P{M > tT <0} (5.11) 
右边 的 两 项 有 相等 的 概率 ,因此 
P{S>t}=P{M+T>t}>P{M>t, T>0}> 3P{M > (5.12) 


此 式 和 (5.9) 相同 . 
例 (d) 为 了 证 明 (5.10), 注意 在 连续 点 上 


P{max|X;| <t} = (F(t) — F(-t))"” < e—"l-F()+F(-). (5.13) 


这 蕴含 (5.10), 因为 当 0 <z<1 时 1-z<e*. 有 


5.6 ”分 部 积分 , 矩 的 存在 性 


对 于 Ri 中 的 任意 期 望 , 也 可 以 利用 熟知 的 分 部 积分 公式 . 如 果 包 是 一 有 界 画 
数 ， 且 有 一 个 连续 导数 WW， 那么 
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b+ 让 
1/ u(z)F{dz} = u(b)F(b) — u(a) F(a) — / w(z) F(z)dz. (6.1) 
证 “经 过 简单 的 重 排 后 , (6.1) 可 化 为 
bt b 
[wou { oes) -Fol =0. (0%) 


假设 lw| < M， 并 把 wb 分 成 n 个 长 度 为 h 的 全 等 区 间 五， 容易 看 出 ， 到 对 
(6.2) 左边 的 贡献 的 绝对 值 小 于 2MhF{I}. 对 大 求 和 我 们 可 以 得 到 , 左边 的 绝对 
值 < 2Mh, 这 个 值 可 以 任意 小 . 因此 (6.2) 的 左边 确实 等 于 零 . 

作为 一 个 应 用 , 我 们 推导 一 个 常用 的 公式 [ 它 推广 了 第 1 卷 11.1 节 (1.8)]. 
引 理 1 对 任 一 a > 0， 在 如 果 下 式 一 边 收 你 ， 那 么 另 一 边 也 收效 的 意义 上 . 


/ ”zepfdzj =a 人 ”ze-lfl — F(z)jdz. (6.3) 
0 0 


证 ”因为 积分 区 域 是 一 个 无 穷 区间 , 所 以 不 能 直接 应 用 (6.1), 但 对 每 个 b< co, 经 
过 简单 重 排 后 有 


b+ b 
人/ zeF{dz} = —b° [1 FUOj+a 人/ zo-1[1 - Fojldz. (6.4) 
0 0 


首先 假设 当 b 一 oo 左边 的 积分 收敛 . 5 ce 对 此 无 穷 积分 的 贡献 > b*[1 一 下 (b)], 因 
而 br[1 一 (b)] 趋 于 零 . 在 这 种 情形 下 ,在 (6.4) 中 取 极 限 5 一 co 可 得 (6.3). 另 一 
方面 , 左边 的 积分 小 于 右边 的 积分 , 因此 后 者 的 收敛 性 保证 了 前 者 的 收敛 性 , 从 而 
(6.3) 成 立 . > 
对 于 左 尾 部 也 有 一 个 类 似 于 (6.3) 的 公式 成 立 . 把 这 两 个 公式 结合 起 来 ,我 们 
得 到 ， 
引 理 2 ”为 使 一 个 分 布 已 有 a >0 阶 绝对 和 矩 , 当 且 仅 当 lz|e-:[1 一 F(z) 二 F(z)] 
在 0,00 上 是 可 积 的 . 
作为 一 个 应 用 , 我 们 来 证 明 : 
引 理 3 设 壬 和 每 是 独立 随机 变量 ,3 二 义 十 Y, 那么 为 使 EE(|SI*) 存在 ， 当 且 仅 
当 E(|X|*) 和 E(|Y|*) 都 存在 . 
证 ”因为 变量 X 和 工 具有 相同 的 矩 ， 所 以 不 失 一 般 性 , 可 设 0 是 和 和 了 的 中 
位 数 ， 但 是 这 时 有 P{|S| > 甘 > 5P{|X| > 如 ,根据 上 一 引 理 , E(|Sl*) < oo 比 
会 E(|X|*) < co. 这 就 证 明了 断言 的 “ 仅 当 ”部 分 .“ 当 ”部 分 可 由 不 等 式 |SI* < 
2°(|XI?* + le) 推出 , 因为 |S| 总 小 于 或 等 于 2|IX| 和 2|Y| 中 的 较 大 者 . 有 > 
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5.7 ” 切 比 雪夫 不 等 式 


切 比 雪夫 (Chebyshev) 不 等 式 是 概率 论 中 最 常用 的 工具 之 一 . 不 等 式 及 其 证 明 
都 与 离散 情形 (第 1 卷 9.6 节 ) 的 一 样 , 我 们 之 所 以 重新 叙述 它 , 主要 是 为 了 便于 参 
考 . 我 们 将 在 7.1 节 中 给 出 有 趣 的 应 用 . 
切 比 雪夫 不 等 式 如 果 E(z2) 存在 , 那么 


P{IX|2t} <t?E(X?), t>0. (7.1) 
特别 地 ， 如 果 (XX) = m，Var(X) = o?， 那么 
P{IX—m|2t} < oo/2. (7.2) 
证 如 果 互 表示 的 分 布 , 那么 


mex’)>/ 


Z2Ffdz} > / Ff{dz}, 
|zl>t |zl>t 


此 式 与 (7.1) 相同 . 

” ” 切 比 雪夫 不 等 式 之 所 以 有 用 , 并 不 是 因为 它 的 数值 估计 精确 , 而 是 由 于 的 和 
洁 性 以 及 它 特别 适用 于 随机 变量 之 和 这 个 事实 . 对 它 可 以 作 许多 推广 , 但 这 些 推广 
不 具有 上 面 所 述 的 性 质 . (大 多 数 推广 非常 简单 ， 最 好 在 需要 时 再 推导 它们 . 例如 ， 
我 们 将 在 7.7 节 中 叙述 切 比 雪夫 不 等 式 与 截 尾 手续 的 一 种 有 用 的 结合 . ) 

我 们 可 以 把 推导 非 平凡 不 等 式 的 一 个 相当 一 般 方法 叙述 如 下 . 如 果 处 处 有 六 > 
0, 并 且 对 于 区 间 I 中 的 所 有 的 zx,u(z) > a > 0, 那么 


F{I} < a-!E(u(X)). (7.3) 


另 一 方面 ， 如 果 在 了 的 外 面 u < 0, 在 I 内 wu < 1， 那 么 可 得 到 相反 的 不 等 式 
{J} > E(u(X)). 选择 v 为 多 项 式 , 我 们 就 可 得 到 只 依赖 于 FF 的 矩 的 不 等 式 . 

例 (a) 设 u(z) = (z+c)?， 其 中 c > 0 那么 对 于 所 有 的 z,u(z) > 0; 对 于 
Zz>t>0, u(z) > (t+c)?. 因此 


P{X>t}< er 


E((X + oj?). (7.4) 
如 果 E(X) = 0, E(X?) = a?, 那么 右边 在 c= 可 时 取 最 小 值 , 因此 


P{X>t} < 


a2 
< Fe t>0 (7.5) 
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这 个 有 趣 的 不 等 式 曾 被 许多 作者 独立 地 发 现 . 

例 (b) 设 X 是 正 的 ( 即 F(0) = 0), E(X) = 1，E(X2) = b， 多项式 u(x) = 
h-2(z 一 a)(a 二 2h 一 z) 仅 对 a < zf<at+t2h 是 正 的 , ,而且 处 处 有 w(z) < 1. 当 
0 < a < 1 时 , 容易 看 出 E(u(X)) > [2h(1 一 a) 一 9h-?. 取 久 =b(1 一 a)-!, 由 这 些 
例子 前 面 的 说 明 , 我 们 得 到 


P{X > oj > (1— a)2bl. (7.6) 
例 (c) ”如 果 EE(X?)=1,E(X4) = M, 那么 对 X2 应 用 上 一 不 等 式 我 们 得 到 
P{IX| > 十 > (1 一 蕊 2M-I，0<t<1. (7.7) 昨 


关于 切 比 雪夫 不 等 式 的 科 尔 莫 戈 罗 夫 推广 见 5.8 节 (e). 


5.8 ”进一步 的 不 等 式 , 凸 函数 


本 节 收 集 的 不 等 式 具有 广泛 的 用 途 , 这 些 不 等 式 决 不 是 概率 论 所 特有 的 . 最 常 
用 的 是 施 瓦 效 (Schwarz) 不 等 式 . 之 所 以 给 出 其 他 的 不 等 式 , 主要 是 因为 在 随机 过 
程 和 统计 学 中 要 用 得 它们 . (本 节 是 供 参 考 用 的 , 而 不 是 供 阅读 用 的 . ) 

(a) 施 瓦 兹 不 等 式 

这 个 不 等 式 的 概率 形式 是 说 ， 对 于 定义 在 同一 空间 中 的 任意 两 个 随机 变量 yp 
和 ,只 要 下 列 期 望 存在 , 就 有 


(E(pw))? < E(p?)E(W). (8.1) 


此 外 ， 只 有 当 菜 一 线性 组 合 ap + by 以 概率 1 等于零 时 等 号 才 成 立 . 更 一 般 地 说 ， 
如 果 是 集合 4 上 的 任 一 测度 ,那么 对 十 任意 两 个 使 下 式 右边 积分 存在 的 函数 
和 少 都 有 
2 
(/ weywiortes) < 人 waPtaa [ war ea 


取 古 为 一 个 纯 原子 型 测度 ， 它 对 每 个 整数 赋予 单位 质量 , 我 们 就 得 到 下 列 形式 的 
关于 和 的 施 瓦 效 不 等 式 ， 


(5 pet) < yo. (8.3) 


鉴于 (8.1) 的 重要 性 , 我们 给 出 两 个 证 明 , 这 两 个 证 明 可 导出 不 同 的 推广 . 同 
样 的 证 明 也 适用 于 (8.2) 和 (8.3). 


5.8 进一步 的 不 等 式 ， 凸 函数 135 


第 一 证 明 ”我 们 可 以 假设 E(%2?) > 0. 于 是 
EU 十 她 )2 = E(y’) + 24E(py) 十 PPE(y2) (8.4) 


是 t 的 一 个 二 次 多 项 式 . 由 于 它 是 非 负 的 ， 所 以 它 有 两 个 复 根 或 一 个 二 重 根 入 二 
次 方程 的 标准 解 表明 ， 在 第 一 种 情形 下 ，(8.1) 以 严格 不 等 式 成 立 ; 在 第 2 种 情形 
下 , E(w 十 地)? = 0, 从 而 除 一 个 概率 为 零 的 集 外 都 有 p+ty = 0. 
第 二 证 明 ”由 于 ”和 可 以 由 它们 的 常数 倍 ap 和 by 来 代替 ， 所 以 只 要 考虑 
E(y?) = 了 E(y2?) = 1 的 情形 就 行 了 . 于 是 在 不 等 式 2|lpyw| < yp? + 妨 中 取 期 望 就 可 容 
易 地 推出 (8.1). p> 
(b) 凸 函 数 詹 生 (Jensen) 不 等 式 
设 * 是 定义 在 开 区 间 工 上 的 一 个 函数 , 已 = (&,u(&)) 是 它 的 图 像 上 的 一 点 . 称 
经 过 PP 的 一 条 直线 工 是 4 在 & 点 的 支撑 线 , 如 果 i 的 图 像 完 全 位 于 工 上 或 工 的 
上 方 . (这 就 排除 了 垂直 线 . ) 用 分 析 的 术语 来 说 , 就 是 要 求 , 对 于 了 中 的 一 切 x， 


ulz) > ul€) + A (2 6), (8.5) 


其 中 入 是 工 的 斜率 . 称 画 数 凡 在 工 中 是 凸 的 ,如果 在 了 中 的 每 一 点 T 上 都 存在 一 
条 支撑 线 . ( 称 一 个 函数 4 是 四 的 , 如果 -是 凸 的 . ) 

我 们 着 手 证 明 , 这 个 定义 旨 含 在 直观 上 与 凸 性 有 关 的 各 种 性 质 , 这 种 性 质 可 用 
凸 折 线 来 说 明 . 

设 下 是 任意 一 个 集中 于 了 上 的 概率 分 布 , 又 设 期 望 E(X) 存在 . 取 & = E(X)， 
并 在 (8.5) 中 取 期 望 , 我 们 得 


E(u) > uE(X)), (8.6) 


只 要 左边 的 期 望 存在 . 这 个 结论 就 是 庆生 不 等 式 . 
最 重要 的 情形 是 FF 集中 于 两 点 zl 和 za 上 ,并 对 这 两 点 赋 重 量 1 一 t 和 t. 这 
时 (8.6) 旺 如 下 形式 ， 


(1 —t)u(z1) + tu(z2) > ul(l ~ t)z1 + tz2). (8.7) 


这 个 不 等 式 有 下 列 简 单 的 几何 解释 . 
定理 1 为 使 一 个 函数 是 凸 的 , 当 且 仅 当 它 的 所 有 的 强 痢 位 于 图 像 的 上 面 或 上 方 . 
证 (i) 必要 性 . 设 尽 是 凸 的 , 考虑 任 一 区 间 去 ;2 上 的 弦 . 当 t 从 0 变 到 1 时 , (1 一 
)z1 + tza 跑 遍 区 间 页; 而，(8.7) 的 左边 是 弦 上 对 应 点 的 纵 坐标 . 于 是 (8.7) 说 明 ， 
弦 上 的 点 位 于 图 像 的 上 面 或 上 方 . 

的 充分 性 . 设 4 有 所 述 的 性 质 , 考虑 4 的 图 像 上 的 3 个 横 坐 标 为 z1 < za < zs 
的 点 Pi, 忆 , 忆 构成 的 三 角形 . 于 是 己 位 于 弦 PP 的 下 方 ， 在 三 角形 3 个 边 
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中 , 只 , 己 的 斜率 最 小 , 忆 P 的 斜率 最 大 . 因此 , 在 区 间 环 ;55 外 , w 的 图 像 位 于 直 
线 肪 己 的 上 方 . 现在 把 zs 看 作 一 个 变量 , 令 zs 一 zz+. 已 忆 的 斜率 单调 地 减少 ， 
但 以 PP 忆 的 斜率 为 下 界 . 因此 ,直线 忆 P 趋 于 一 条 经 过 忆 的 直线 二 在 D5; 而 
外 , v 的 图 像 位 于 直线 已 PB 的 上 方 , 因此 整个 图 像 位 于 工 的 上 面 或 上 方 . 于 是 工 
是 炎 :在 zz 点 的 支撑 线 . 由 于 za 是 任意 的 , 所 以 4 的 凸 性 得 证 . p 

作为 弦 的 极限 , 直线 工 是 一 条 右 切 线 . 在 取 极 限 的 过 程 中 ,Ps 的 横 坐 标 zs 趋 
于 mm, RB 趋 于 工 上 的 一 点 . 因此 ,RB 一 忆 . 同样 的 论证 对 于 从 左边 逼近 也 成 立 . 
我 们 断言 , v 的 图 像 是 连续 的 , 在 每 个 点 上 都 有 左 、 右 切线 . 此 外 , 这 些 切线 是 支撑 
线 , 它们 的 斜率 是 单调 变化 的 . 因为 单调 函数 至 多 有 可 数 多 个 不 连续 点 ， 所 以 我 们 
证 明了 . 
定理 2 ” 凸 函 数 在 所 有 的 点 上 都 有 左 、 右 导数 ， 而 且 左 、 右 导数 都 是 不 减 函 数 . 它 
们 仅 可 能 在 可 数 多 个 点 上 不 相同 . 

显然 , 这 个 定理 又 给 出 了 凸 性 的 充 要 条 件 . 特别 ,如 果 存 在 二 阶 导数 ， 那么 为 
使 4 是 凸 的 , 当 且 仅 当 w > 0. 

我 们 通常 把 (8.7) 当 作 凸 性 的 定义 . 对 于 t= 我 们 得 到 不 等 式 

4) < 

此 式 说 明 弦 的 中 点 位 于 的 图 像 的 上 面 或 上 方 . 如 果 v 是 连续 的 ,那么 这 个 性 质 
保证 图 像 恒 不 与 弦 相 交 , 因此 w 是 凸 的 . 更 一 般 地 可 以 证 明 , 满足 (8.8) 的 任 一 贝 
尔 函 数 9 是 凸 的 . 

(c) 矩 不 等 式 

我 们 来 证 明 , 对 于 任 一 随机 变量 XX， 


ult) =InE(|X|), t>0 (8.9) 


在 使 上 述 积分 存在 的 每 个 区 间 中 , 是 土 的 凸 函 数 , 事实 上 , 根据 施 瓦 兹 不 等 式 (8.1)， 
只 要 下 列 积分 存在 , 就 有 


E?(|X|!) < E(IXI+*)E(X|*), 0O<h<t. (8.10) 


令 z1=t 一 h, z2 =t+h, 我 们 看 出 , (8.8) 成 立 . 因此 , 正如 所 断言 的 那样 , u 是 凸 
的 . 


@ 满足 (8.8) 的 每 个 w， 或 者 是 凸 的 ， 或 者 在 每 个 区 间 中 它 都 在 一 co 和 oo 之 间 振动 . 见 G. H. 
Hardy, J. E. Littlewood and G. Pléya, Inequalities, Cambridge, England, 1934, 特别 见 3.7 
节 . 
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因为 u(0) < 0, 所 以 连接 原点 和 点 (t,u(t)) 的 直线 的 斜率 二 1u(t) 单调 地 变化 ， 
因此 E(|X|H)1/t 是 t > 0 的 不 减 函 数 . 

(d) 赫 尔 德 (Hilder) 不 等 式 

设 p>1,g9>1,p-!1+g =1. 那么 对 p>>0,W>0, 当 下列 积 分 存在 时 有 


E(py) < (E(p7)Y? (EY) Ys. (8.11) 


( 施 瓦 北 不 等 式 (8.1) 是 p = g = 2 的 特殊 情形 , 可 以 类 似 地 推广 (8.2) 和 (8.3).) 

证 对 z>0, 函数 = log z 是 目的 , 即 它 满足 带 有 相反 不 等 号 的 (8.7). 取 对 数 ， 
对 于 ru zz > 0, 我 们 得 

Tl tz < (1 ~ t)z1 + tr2. (8.12) 


与 在 施 瓦 效 不 等 式 的 第 二 证 明 中 一 样 ， 只 要 考虑 由 E(yp?) = E(w") = 1 正规 化 了 的 
被 积 函数 就 行 了 . 设 t=g71, 1 一 t=p™1. 那么 在 (8.12) 中 , 令 zi = wpzz = 如 并 
取 期 望 就 可 推出 断言 E(wpw) < 1. 

(e) 科 尔 莫 戈 罗 夫 (Kolmogorov) 不 等 式 

设 Xi,…,Xn 是 具有 有 限 方差 的 独立 随机 变量 ， 且 E(Xk) = 0， 则 对 任 一 
FE 类 1 


P{maxl|S1l, ,|Snl] > zj < “2E(S2) (8.13) 


这 是 切 比 雪夫 不 等 式 的 一 个 重要 加 强 , 在 第 1 卷 9.7 节 中 我 们 已 对 离散 变量 推 
导 过 它 , 那里 的 证 明 可 以 毫 不 改变 地 照搬 过 来 , 但 是 我 们 将 用 这 样 一 种 形式 来 重新 
馆 述 它 , 使 得 我 们 可 以 明显 看 出 科 尔 莫 区 罗 夫 不 等 式 可 更 一 般 地 适用 于 下 菊 , 我 们 
将 在 7.9 节 中 再 回来 讨论 这 个 问题 . 
证 令 z2=t. 对 于 固定 的 t+ 和 j=1,2,…,n, 用 4; 表示 “5? >t, 但 对 一 切 下 标 
5< 泌 58 和 加 这 个 事件 . 用 文字 叙述 就 是 ，4i 是 使 得 j 为 满足 58 > 上 的 下 标 上 中 
的 最 小 者 的 事件 . 当然 , 这 样 的 指标 了 未 必 存 在 , 诸 事 件 4; 之 并 恰好 就 是 出 现在 
科 尔 葛 戈 罗 夫 不 等 式 的 左边 的 事件 . 因为 诸 事 件 4; 是 互 斥 的 ， 所 以 这 个 不 等 式 可 
以 改写 成 形式 


Pt < tIE(S?). (8.14) 
j=1 


用 14; 表示 事件 4; 的 指示 函数 , 即 14; 是 这 样 一 个 随机 变量 , 它 在 4; 上 等 于 
1, 在 4; 的 余 集 上 等 于 0. 于 是 14; < 1, 因此 


E(S21) > 入 E(S214;). (8.15) 
j=1 
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我 们 将 证 明 
E(S214;) > E(S?14;). (8.16) 
因为 当 4 发 生 时 ,53 > 二 所 以 右边 > tP{4;}, 从 而 (8.15) 化 为 断言 (8.14). 
为 证 (8.16), 我 们 注意 Sn = 5; + (Sn 一 5;), 因此 


E(S214;) > E(S314;) + 2E((Sn — 5;)5;14;). (8.17) 
因为 变量 5 - Si = Xjt1 十 … 十 Xn 和 5;l4; 独立 ,所 以 它们 的 期 望 满足 乘法 法 
则 , 因而 右边 第 2 项 等 于 零 . 因此 (8.17) 化 为 断言 (8.16). p 


5.9 ”简单 的 条 件 分 布 , 混合 


在 3.2 节 中 , 我 们 在 随机 变量 X 和 YY 的 联合 分 布 有 一 个 连续 密度 的 情形 下 ， 
引进 了 “在 X 的 一 给 定 值 下 Y 的 条 件 密度 ”的 概念 . 由 于 我 们 不 打算 作 一 般 的 研 
究 ， 所 以 我 们 着 手 对 较 广泛 的 一 类 分 布 定义 类 似 的 概念 ，( 系 统 的 理论 将 在 5.10 节 
和 5.11 节 中 给 出 . ) 

对 于 直线 上 任意 一 对 区 间 4 和 B, 令 


Q(4,B)=P{X € A,Y € B}. (9.1) 
利用 这 个 记号 , XX 的 边 绕 分 布 为 


MA4} = Q(4,R'). (9.2) 
如 果 (4) > 0, 那么 事件 {Y e B} 在 给 定 {X e 4} 下 的 条 件 概率 为 
_ Q(4, B) 
P{Y €é BIXe A}= rr (9.3) 


(如 果 pu{A} = 0, 那么 这 个 条 件 概率 没有 定义 . ) 当 4 是 区 间 hh = zz 十 有 时 , 我 
们 利用 上 述 公式 , 并 令 h 一 0+. 在 适当 的 正则 性 条 件 下 , 极限 


, Q(An, B) 
qz, B) = Jim A (9.4) 


对 于 xz 和 B 的 各 种 选择 都 存在 . 按照 3.2 节 中 所 用 的 手续 和 推理 ,在 这 种 情形 下 ， 
我 们 可 以 记 

gq(z, B) = P{Y € BIX = 2z}, (9.5) 
并 称 9 为 “事件 {Y e B} 在 给 定 和 一 工 下 的 条 件 概率 .” 这 就 把 条 件 概率 的 概念 推 
广 到 了 “假设 ” 具有 零 概率 的 情形 . 当 9 不 充分 正则 时 不 会 发 生 困 难 , 但 我 们 不 分 
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析 适 当 的 正则 性 条 件 , 因为 在 下 节 中 将 给 出 一 个 一 般 的 手续 . 在 特殊 情况 下 这 种 朴 
素 的 处 理 方法 就 足够 了 , 我 们 经 常 可 以 利用 直观 推导 出 条 件 分 布 的 形式 来 . 

例 (a) ” 设 一 对 变量 义 , Y 有 一 个 联合 分 布 f(z,y). 为 了 简单 起 见 , 我 们 设 f 是 一 
个 严格 正 的 连续 函数 , 则 


1 
qa(z, B) = Fs) f(z,y)dy, 


其 中 fi(z) = q(z, 一 00;00) 是 久 的 边缘 密度 . 换 句 话说 , 对 于 固定 的 >， 集 函数 4 有 
一 个 密度 f(z,y)/fi(z). 

例 (b) 设 X 和 Y 是 分 别 具 有 分 布 已 和 G 的 独立 随机 变量 . 为 了 简单 起 见 , 设 
X > 0( 即 F(0) = 0). 考虑 乘积 2 = XY. 那么 


P{Z <tIX =z} = G(t/z), (9.6) 


2 的 分 布 函数 U 可 通过 关于 下 积分 (9.6) 得 到 . [ 见 2.3 节 (3.1). 此 断言 是 下 面 的 
公式 (9.8) 的 一 个 特殊 情形 . ] 特别 地 , 当 XX 服从 0,T 中 的 均匀 分 布 时 ， 


1 
vo=/ G(t/z)dz. (9.7) 


这 个 公式 可 以 作为 单 峰 分 布 理论 的 一 个 很 方便 的 起 点 .9 
关于 进一步 的 例子 见习 题 18 和 习题 19. > 
下 面 的 定理 (应 归功 于 谢 帕 (L. Shepp)) 是 辛 钦 发 现 的 一 个 准则 的 概率 形式 . 


定理 为 使 U 是 单 峰 的 . 当 且 仅 当 它 具有 形式 (9.7), 即 当 且 仅 当 它 是 这 样 丙 个 独立 变量 的 
乘积 Z = XY 的 分 布 , 使 得 X 服从 可 中 的 均匀 分 布 . 

证 取 h>0, 用 UU 表示 这 样 一 个 分 布 函 数 , 它 的 图 像 是 在 点 0,+h,… 上 与 U 重合 的 折 
线 . [ 换 句 话说 , Us (nh) = U(nh), Un 在 区 间 nh,(n 十 1)* 上 是 线性 的 . ] 由 定义 显然 可 见 , 为 
使 U 是 一 个 音 峰 分 布 ,， 当 上 且 仅 当 所 有 的 Uh 是 单 峰 的 . [CA 有 一 个 密度 uh， wn 是 一 个 阶梯 
函数 , 每 一 个 在 形 如 nh 的 点 不 连续 的 阶梯 函数 可 以 写成 如 下 形式 


Epis! ( 鞠 )， (4) 


其 中 , 当 0 <z < 1 时 , f(z) = 1. 对 于 z 的 其 他 值 , f(z) = 0. 为 使 函数 (*) 在 页 55 和 
一 oc0,0 上 是 单调 的 ， 当 且 仅 当 对 于 所 有 的 n,pn > 0; 如 果 省 pn = 1, 那么 (*) 是 一 个 密度 . 
但 是 , 在 这 种 情况 下 ,(*) 是 这 样 两 个 随机 变量 的 乘积 Z = X 的 密度 , 使 得 X 服从 TI 
上 的 均匀 分 布 , 且 P{Y = nh} = pn. 于 是 我 们 证 明了 , 为 使 Us 是 单 峰 的 ， 当 上 且 仅 当 它 具 

@ 当 且 仅 当 U 的 图 像 在 一 606,0 中 是 凸 的 ,在 0,00 中 是 四 的 时 候 , 我 们 称 分 布 函数 U 是 一 个 众 数 


在 原点 的 单 峰 分 布 函数 [ 见 5.8 节 (b)j. 原点 可 以 是 不 连续 点 . 但 除 此 之 外 , 单 峰 性 还 要 求 存在 一 
个 密度 w, 它 在 一 co,0 和 0 co 中 均 为 单调 的 . (不 排除 常 值 区 间 . ) 
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有 形式 (9.7)( 把 G 换 为 一 个 集中 于 点 0, 土 h,… 的 算术 分 布 Gh). 令 h 一 0, 由 单调 收 剑 性 ， 
我 们 得 到 了 本 定理 . 
(见习 题 25、 习题 26 和 15.9 节 中 的 习题 10.) » 


在 适当 的 正则 性 条 件 下 , 对 于 固定 的 z,q(z, 了) 表示 B 中 的 一 个 概率 分 布 ; 对 
于 固定 的 B,q(z, B) 表示 z 的 一 个 连续 函数 . 于 是 


QU 本 = {ale, Putas}. (9.8) 


事实 上 ， 右 边 显然 表示 平面 上 的 一 个 概率 分 布 ， 利 用 (9.4) 中 的 微分 可 得 a(z, B). 
公式 (9.8) 说 明 怎 样 用 一 个 条 件 分 布 和 一 个 边缘 分 布 来 表示 R? 中 的 一 个 给 定 分 布 . 
用 2.5 节 中 的 术语 , 它 把 给 定 的 分 布 表示 为 一 个 依赖 于 参数 z 的 分 布 族 q(z, B) 的 
混合 , 其 中 p 是 随机 参数 z 的 分 布 . 

在 实际 中 , 我 们 常常 把 上 述 手 续 倒 过 来 . 我 们 从 一 个 “随机 核 "g 开 始 , 这 里 g 是 
点 z 和 集合 B 的 一 个 函数 gq(z, B), 使 得 对 于 固定 的 >， 它 是 一 个 概率 分 布 ; 对 于 
固定 的 B, 它 是 一 个 贝尔 函数 . 给 定 任 一 概率 分 布 py, (9.8) 中 的 积分 就 定义 了 形 如 
(4,B) 的 平面 集合 的 概率 ,从 而 定义 了 平面 上 的 一 个 概率 分 布 . 通常 用 点 函数 表示 
(9.8). 考虑 一 个 依赖 于 参数 9 的 分 布 函数 族 G(9,y) 和 一 个 概率 分 布 y, 那么 可 定 
义 一 个 新 的 分 布 函数 


+oo 
vw=/ ~ Glow)p{dr}. (9.9) 


[这 个 公式 表示 (9.8) 在 4 = =50,06,q(z, -00,y) = G(z,y) 的 特殊 情形 . ] 这 种 混 
合 曾 出 现在 第 1 卷 第 5 章 中 , 我 们 在 2.5 节 中 讨论 过 它们 . 在 下 一 节 中 将 说 明 , 9 恒 
可 解释 为 一 个 条 件 概率 分 布 . 
例 (ec) ”如果 五 和 是 分 布 , 那么 pFi + (1 -用 及 是 一 个 混合 分 布 (0 <p< 1)， 
它 表 示 (9.9) 在 4 集中 于 两 个 原子 上 时 的 特殊 情形 . 
例 (d) ”随机 和 . 设 X1,X2,… 是 具有 共同 分 布 FF 的 独立 随机 变量 . 设 N 是 一 个 
与 X; 独立 的 随机 变量 ， 它 以 正 概率 po,P1,… 取 值 0,1,…. 我 们 感 兴趣 的 是 随机 
变量 Sy = Xi 十 … 十 XN. Sw 在 给 定 N =n 下 的 条 件 分 布 是 F"*, 因此 Sw 的 分 
布 为 

U=D pnFnw， (9.10) 

n=0 

此 式 是 (9.9) 的 一 个 特殊 情形 . 在 这 种 情形 下 ,每 一 个 假设 N = n 的 概率 pn 都 是 
正 的 , 因而 我 们 得 到 的 是 严格 意义 下 的 条 件 概率 分 布 . 其 他 的 例子 可 在 2.5 节 ~2.7 
节 找 到 . (见习 题 21 和 习题 24. ) 
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研究 使 条 件 概率 9 可 以 由 (9.4) 式 中 的 微分 过 程 来 定义 的 精确 条 件 是 无 意义 
的 . 条 件 概率 的 主要 性 质 包含 在 关系 式 (9.8) 中 , 此 式 用 条 件 概率 表示 集合 的 概率 ， 
利用 (9.8) 式 作为 条 件 概率 的 定义 是 最 简单 的 . 它 不 唯一 地 确定 g, 因为 如 果 对 每 个 
集合 B, 除了 一 个 零 测度 集 外 都 有 qz, B) = 5(z, B), 那么 把 g 换 成 5 后 ,(9.8) 
仍然 成 立 . 但 是 , 这 种 不 确定 性 是 不 可 避免 的 . 例如 ,如 果 /4 集中 在 区 间 1 上, 那 
么 对 于 工 外 的 z,q 的 自然 的 定义 是 不 可 能 的 . 实质 上 , 我 们 讨论 的 是 整个 一 类 等 价 
的 条 件 概率 ,我 们 应 说 “一 个 ” 条 件 概率 分 布 9 而 不 应 说 “那个 " 条 件 概率 分 布 q. 
在 个 别 的 情况 下 , 通常 存在 一 个 由 正则 性 条 件 支配 的 选择 . 

为 了 确定 起 见 ， 我 们 只 考虑 由 形 如 Xe A 和 Y e B 的 条 件 确定 的 事件 , 其 中 
X 和 Y 是 给 定 的 随机 变量 , 4 和 B 是 直线 上 的 波 雷 尔 集 . 我 们 首先 看 一 看 “事件 
{Y € B} 在 给 定 的 X 下 的 条 件 概率 ”的 各 种 不 同 含义 ，X 的 给 定 值 可 以 是 一 个 固 
定数 , 也 可 以 是 一 个 未 定数 . 对 于 第 2 种 解释 , 我 们 得 到 X 的 一 个 函数 , 即 一 个 随 
机 变量 我 们 将 用 P{BIX} 或 g(X, B) 等 来 表示 它 . 为 了 强调 起 见 ， 我 们 把 在 固定 
点 z 上 的 值 记 为 P{r e BIX = z} 或 q(z,B). 
定义 1 设 集合 电 是 国定 的 . P{Y E BIX}( 用 文字 来 说 就 是 “事件 {Y E B} 在 给 
定 的 X 下 的 条 件 概率 ") 是 这 样 一 个 画 数 g(X,B), 使 得 对 于 Rl 中 的 每 个 集合 4， 


P{Xe4yreB}= / qz, B)p{dz}, (10.1) 
A 


其 路 是 义 的 边缘 分 布 . 

当 z 是 一 个 原子 时 ,XX = z 这 一 假设 具有 正 概率 , P{Y e BIX = 2} 已 经 由 
(9.3) 定义 了 ,其 中 4 由 一 点 z 组 成 .但 是 在 这 种 情形 下 , (10.1) 化 为 (9.3), 我 们 的 
定义 和 记号 是 一 致 的 . 

我 们 来 证 明 , 条 件 概率 P{Y e BIX} 恒 存在 . 事实 上 , 很 显然 有 


P{X € Ah, Y eB} < (A). (10.2) 


对 于 固定 的 B, 右边 作为 4 的 函数 , 确定 了 一 个 有 限 测度 . (10.2) 殖 含 这 个 测度 是 
关于 绝对 连续 的 ( 见 5.3 节 的 拉 东 - 尼 科 过 姆 定理 ). 这 说 明 我 们 的 测度 由 一 个 密 
度 4 所 确定 , 因此 (10.1) 是 正确 的 . 
到 现在 为 止 , 集合 B 一 直 是 固定 的 , 但 是 我 们 之 所 以 选择 记号 q(z, B) 是 为 了 
改变 B. 换 句 话说 , 我 们 要 把 9 看 作 是 两 个 变量 (点 z 和 直线 上 的 集合 B) 的 函数 . 
* 本 节 初恋 时 可 略 去 . 
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我 们 要 求 , 对 于 固定 的 z, 集 函 数 g 是 一 个 概率 测度 , 这 要 求 g(z, R1) = 1, 并 且 对 
于 任意 一 列 并 集 为 B 的 不 相交 集 序列 Bi, B2,…， 


q(z,B) = > qtz, Bh). (10.3) 


如 果 右边 诸 项 表示 Bi 的 条 件 概率 , 那么 这 个 和 就 是 B 的 一 个 条 件 概率 , 但 是 还 有 
另外 一 个 一 致 性 要 求 ， 即 (10.3) 对 于 我 们 的 g 和 z 的 一 切 选择 都 是 正确 的 . [注意 
定义 1 不 排除 在 个 别 点 z 上 的 不 合理 选择 g(z, B) = 17. ] 不 难看 出 ,可 以 选 出 满 
足 这 些 条 件 的 q(z, B).@ 这 表明 在 下 列 意义 上 ,存在 一 个 了 在 给 定 的 X 下 的 条 件 
概率 分 布 . 

定义 2 所 谓 Y 在 给 定 的 义 下 的 条 件 概率 分 布 ， 指 的 是 这 样 一 个 二 元 (点 Z 和 集 
合 BB) 函数 9， 使 得 

(i) 对 于 一 个 国定 的 集合 BB， 


q(X,B) =P{Y € BIX} (10.4) 


是 事件 {Y E B} 在 给 定 的 于 下 的 条 件 概率 ; 

(区 对 于 每 个 z,g 是 一 个 概率 分 布 . 

事实 上 , 一 个 条 件 概率 分 布 是 一 族 普 通 的 概率 分 布 , 因而 整个 理论 可 以 照搬 过 
来 . 因此 , 当 gq 是 给 定 的 时 候 2， 下 面 的 定义 引入 了 一 个 新 的 记号 ， 而 不 是 一 个 新 
定义 3 条 件 期 望 EE(Y|X) 是 羡 的 一 个 函数 , 它 在 ZT 上 取 值 


+o0 
Er 四 = 人 pad (10.5) 


只 要 积分 收敛 (可 能 除了 在 一 个 概率 为 震 的 工 集 合 上 以 外 ). E(Y|IX) 是 X 的 一 个 
函数 ， 即 一 个 随机 变量 . 为 了 清楚 起 见 ， 有 时 用 EE(Y|X = z) 表 示 它 在 点 > 上 的 值 . 
由 定义 得 


es 
E(Y) = [ E(Ylz)u{dz} 或 E(Y)=E(E(Y|X)). (10.6) 


例如 , 设 Bl = 0,00, Ba = 一 00,0. 选 gq(z, Bi) 为 Bi 的 任 一 满足 0 < q(z, B1) < 1 的 条 件 
概率 . 那么 q(x, B2) = 1 一 g(z, B1) 自然 是 一 种 合理 的 选择 . 把 Bi 分 成 Bill 和 B12, 并 选取 
9(z, Bil) 使 得 0 < a(z, Bi1) < q(z, B1). 令 g(z, B12) = q(z, B1) - qz, B11), 按照 同样 的 方 
式 无 穷 地 细 分 下 去 . 那么 利用 可 加 性 要 求 , (10.3) 就 可 对 所 有 的 开 集 BB, 从 而 对 所 有 的 博 需 尔 集 妃 
定义 gz, B). 

这 个 构造 仅 依赖 于 所 亩 的 网 格 的 存在 性 , 这 种 网 格 把 空间 分 成 有 限 多 个 不 相交 集合 , 每 个 集合 
再 以 同样 的 方式 进行 划分 ， 这 个 空间 的 每 一 点 都 是 一 个 出 现在 逐次 划分 中 的 递 缩 集 序列 的 唯一 极 
限 . 因此 , 此 断言 在 R7” 中 和 许多 其 他 空间 中 也 是 正确 的 . 

@ 关于 更 灵活 的 一 般 定 义 , 见 5.11 节 . 
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我 们 已 用 条 件 分 布 定 义 了 条 件 期 望 E(Y|X), 如 果 只 讨论 一 对 固定 的 变量 和 
Y, 这 是 十 分 令 人 满足 的 . 但 是 , 当 我 们 讨论 一 族 随机 变量 时 , 各 个 条 件 概率 的 不 唯 
一 性 将 导致 很 大 的 困难 . 幸好 在 实际 中 可 以 不 用 这 个 不 适用 的 理论 . 实际 上 , 原来 
可 以 不 用 条 件 分 布 而 给 出 一 个 极其 简单 灵活 的 条 件 期 望 理论 . 为 了 理解 这 个 理论 ， 
最 好 从 仔细 研究 恒等式 (10.5) 开始 . 

设 4 是 直线 上 的 一 个 博 雷 尔 集 , 用 14(X) 表示 当 Xe 4 时 等 于 1 而 当 XEA 
时 等 于 0 的 随机 变量 . 我 们 在 (10.5) 的 两 边关 于 X 的 边缘 分 布 4 进行 积分 , 取 集 
合 4 为 积分 区 域 . 结果 可 以 写成 形式 


+o0 
PaCO)= 人 Printaz) -人 la(T)E(Y |z)u{dr}. (11.1) 


变量 X 把 样本 空间 6 映 到 实 直线 上 ， 上 面 的 积分 只 与 此 直线 上 的 函数 和 测度 有 
关 . 但 是 , 随机 变量 YLa(X) 是 定义 在 原先 的 样本 空间 中 的 ， 因 而 需要 一 种 更 好 的 
记号 . 显然 , L4(X) 是 6 中 一 个 集合 B 的 指示 函数 , 即 B 是 6 中 所 有 这 样 的 点 所 
组 成 的 集合 , 使 得 X 在 这 些 点 上 所 取 的 值 属于 4. 正如 我 们 在 4.3 节 中 所 看 到 的 
那样 ， 所 有 按 这 种 方式 对 应 于 直线 上 的 任意 博 雷 尔 集 4 的 集合 B, 构成 一 个 6 中 
的 o 代数 , 我 们 称 这 个 o 代数 为 XX 产生 的 代数 . 于 是 (11.1) 表明 U = E(Y|X) 是 
区 的 一 个 函数 : 对 于 X 产生 的 o 代数 中 的 每 个 集合 B, 它 满足 


E(Y1s) = E(Uls). (11.2) 


我 们 将 看 到 , 这 个 关系 式 可 以 作为 条 件 期 望 的 一 个 定义 , 因此 正确 地 理解 它 是 非常 
重要 的 . 一 个 简单 的 例子 将 说 明 它 的 本 质 . 

例 (a) ”我 们 取 坐 标 变量 为 X 和 Y 的 平面 作为 样本 空间 , 并 且 为 了 简单 起 见 , 假 
设 概率 由 一 个 严格 正 的 连续 密度 f(z,y) 所 确定 . 随机 变量 X 在 平行 于 y 轴 的 任 一 
直线 上 取 常 数值 . 如 果 4 是 轴 上 的 一 个 集合 ,那么 相应 的 平面 集合 由 所 有 通过 
4 中 一 点 的 直线 所 组 成 . (11.2) 的 左边 是 yf(z,y) 在 这 个 集合 上 的 普通 积分 ， 它 可 
以 写成 累 次 积分 的 形式 . 因此 


+o0 
Bria= [af yf (zy)dy. (11.3) 


(11.2) 的 右边 是 函数 U(z) 有 (z) 的 普通 积分 , 其 中 户 是 X 的 边缘 密度 . 于 是 在 这 
* 本 节 的 理论 只 在 6.12 节 和 7.9 节 中 被 应 用 于 获 上 - 
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种 情形 下 , (11.2) 说 明 
I 
U(z)= Ry yf (x,y)dy. (11.4) 


这 与 条 件 期 望 的 定义 (10.5) 及 直观 是 一 致 的 . 

例 (b) ”( 续 ) 我 们 现在 来 证 明 , 即使 当 密 度 不 存在 , 平面 上 的 概率 分 布 是 任意 的 时 
候 , (11.2) 也 定义 一 个 条 件 期 望 . 给 定 z 轴 上 的 一 个 博 雷 尔 集 4, (11.2) 的 左边 就 确 
定 一 个 数 jn{4}. 显然 , p1 是 一 个 定义 在 > 轴 的 所 有 博 雷 尔 集合 上 的 测度 . 另外 一 
个 这 样 的 测度 由 X 的 边缘 分 布 上 给 出 ， 它 被 定义 为 y{A} = E(14). 因此 很 明显 ， 
如 果 pu{4} = 0, 那么 有 各 {4)} = 0. 换 句 话说 , /ja 关于 /是 绝对 连续 的 , 根据 5.3 
节 的 拉 东 - 尼 科 迪 姆 定理 , 存在 一 个 函数 U, 使 得 


请 本 = 人 wontaz (11.5) 


这 与 (11.2) 只 在 记号 上 有 所 不 同 . 当然 , 如 果 在 一 测度 为 0 的 集合 上 改变 U 的 值 ， 
那么 (11.5) 仍 是 正确 的 ,但 是 这 种 不 唯一 性 是 条 件 期 望 的 概念 所 固有 的 . > 

这 个 例子 说 明 , 对 于 任 一 概率 空间 中 的 任意 一 对 随机 变量 X,Y, (11.2) 可 以 用 
来 定义 条 件 期 望 V(X) = E(Y|X)[ 当 然 要 假设 E(Y) 存在 ]. 但 是 , 这 种 处 理 方法 可 导 
致 进一步 的 结论 . 例如 ,为 了 定义 一 对 随机 变量 Xi, X 的 条 件 期 望 E(Y|X1, Xz)， 
我 们 仍 可 利用 (11.2), 只 是 巨 现在 是 Xi 和 X 产生 的 o 代数 罗 中 的 任意 一 个 集 
合 ( 见 4.3 节 ). 当然 , U 是 Xi,X 的 一 个 函数 , 但 是 我 们 在 4.4 节 中 看 到 过 ,对 侦 
(Xi Xz) 的 贝尔 函数 类 与 所 有 的 只 可 测 函数 所 成 的 类 重合 . 因此 , 我 们 可 以 用 杜 布 
(Doob) 首先 提出 的 下 列 定义 来 包括 所 有 可 能 的 情形 . 
定义 ” 设 (6,4,P) 是 一 个 概率 空间 , 人 B 是 外 中 的 一 些 集合 组 成 的 一 个 o 代数 ( 即 
种 CD. 设 Y 是 一 个 具有 期 望 的 随机 变量 . 

我 们 称 随 机 变量 U 为 了 关于 人 B 的 条 件 期 望 , 如 果 它 是 吧 可 测 的, 并 且 (11.2) 
对 由 中 的 所 有 集合 妃 都 成 立 . 在 这 种 情形 下 ,我 们 记 U = E(Y|%). 

特别 地 ， 当 色 是 由 随机 变量 Xi,Xr 产生 的 o 代数 时 ， 变 量 UU 化 为 
1，… 的 一 个 贝尔 函数 。 我 们 将 用 E(Y|Xi1,…，X,) 来 表示 条 件 期 望 . 

E(Y|%) 的 存在 性 可 通过 例 (b) 中 指出 的 方法 使 用 抽象 的 拉 东 - 尼 科 过 姆 定理 
来 证 明 . 

为 了 看 出 条 件 期 望 UV = E(Y|%) 的 主要 性 质 ,注意 当 把 ls 换 为 8 中 的 集合 
B; 的 指示 函数 的 线性 组 合 时 ，(11.2) 显然 也 成 立 . 但 是 我 们 在 4.3 节 中 已 看 到 , 每 
个 8 可 测 函 数 都 可 以 用 这 样 的 线性 组 合 一 致 地 逼近 ， 取 极限 可 以 看 出 ，(11.2) 将 
会, 对 于 任 一 归 可 测 函 数 Z, 更 一 般 地 有 E(YZ) = E(UZ). 把 Z 换 为 Zia 并 与 定 
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义 (11.2) 比较 ,可 以 看 出 , 对 于 任 一 器 可 测 函数 2， 
E(Y2|®) = ZE(Y|%). (11.6) 


这 是 一 个 很 重要 的 关系 式 . 

最 后 , 考虑 一 个 o 代数 Wo C 名, 并 设 Uo = E(Y|%0). 对 于 Bo 中 的 一 个 集合 
B, 我 们 既 可 以 关于 多 也 可 以 关于 %o 解释 (11.2), 于 是 我 们 得 到 , 对 于 %Bo 中 的 
B, 

E(Yls) = E(Uls) = E(Uolap). 
因此 , 根据 定义 有 Uo = E(V|%Bo), 从 而 如 果 Bo C 只, 那么 
E(Y|%0) = E(E(Y|®)|%0). (11.7) 

例如 ,3 可 以 是 两 个 变量 X1,X2 产生 的 o 代数 ,而 8o 表示 只 由 Xi 产生 的 o 代 
数 . 于 是 (11.7) 化 成 E(Y|X1) = E(E(Y|X1, X2)|X1). 

最 后 我 们 注意 ，(11.2) 蕴含 ,对 于 常数 1, 无 论 怎样 选择 多 ,条件 期 望 总 等 于 


1. 因此 , (11.6) 列 含 ,对 于 所 有 的 好 可 测 变 量 2,E(2|3) = 2. 
几乎 没有 必要 说 明 期 望 的 基本 性 质 可 以 搬 到 条 件 期 望 上 . 


5.12 习 题 
1 设 X 和 开 是 具有 分 布 函数 F 和 G 的 独立 变量 , 求 (a)XUY, (b) XmyYr，(c) 
2XUY,，(d) X?UY 的 分 布 函数 ? . 
2. 泥 合 . 设 X,Y, 2 是 独立 的 ; X 和 Y 有 分 布 忆 和 G, 而 P{Z =1}=p,P{2 = 0} = 


qlp+q=1). 求 (a)ZX+(1—2Z)Y, (b)ZX+(1-2Z)(XUY), (ZX+(1-Z)(XNY) 
的 分 布 函 数 . 


3. 如 果 已 是 一 个 连续 分 布 函数 ，(a) 由 第 一 个 积分 的 定义 (把 二 56;o5 分 成 子 区 间 )，(b) 
通过 把 左边 解释 为 E(F(X)), 其 中 F(X) 服从 一 个 均匀 分 布 ,证明 


too 4 
站 F{z}F{dz} = / yay = 二: 
更 一 般 地 , 令 G(z) = F"(z), 证 明 
十 co 四 n 
大 Pr (2)G{dr} = EF: 


外 如 果 a 和 日 是 数 , 那么 aUb = max(a,b) 表示 两 数 中 的 较 大 者 , a 门 6 = min(a,6) 表示 两 数 中 的 
较 小 者 . 对 于 函数 , fg 表示 在 点 z 取 值 f(z) 门 g(z) 的 函数 ( 见 4.1 节 ). 于 是 站 Y 和 XUY 
是 随机 变量 . 
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La 


10. 


11. 


设 F(z,y) 表示 平面 上 的 一 个 概率 分 布 . 当 z < 0,y < 0 时 , 令 U(z,y) = 0. 在 所 有 其 
他 点 处 , 令 U(z,y) = F(z,y). 证 明 , U 对 每 个 变量 都 是 单调 的 , 但 不 是 一 个 概率 分 布 . 
| 提示: 考虑 混合 差 . ] 


指定 的 边 绑 分 布设 王 和 G 是 Ri 中 的 分 布 函数 ， 


U(z,9) = Fez)cGG)D+a0 一 Fn)G-G(G))， 
其 中 lal < 1. 证明, UV 是 R? 中 的 一 个 具有 边缘 分 布 FG 的 分 布 函数 ， 并 且 为 使 U 
有 密度 , 当 且 仅 当 F 和 G 有 密度 . 


提示 : 如 果 w(z,y) = u(z)v(y)， 那么 (1, 12) 中 定义 的 ww 的 混合 差 具 有 形式 AuAv， 
而 且 注 意 A(F?) < 2AF. 


,在 单位 正方 形 内 部 , 如 果 z < y, 则 令 U(z,y) = z; 如 果 z >y, 则 令 U(z,y) = 和 证 


明 : U 是 一 个 集中 在 对 角 线 上 的 分 布 函数 (因而 是 奇异 的 ). 


， 具有 指定 边缘 分 布 的 弗 雷 歌 (Fréchet) 最 大 分 布 . 设 王 和 G 是 Ri 中 的 分 布 函数 , U(z, 


三 F(z) 介 G(y). 证 明 : (a)U 是 一 个 具有 边缘 分 布 已 和 G 的 分 布 函数 ，(b) 如 果 是 
有 具有 这 个 性 质 的 任 一 分 布 , 那么 V < U. (c)U 集中 在 由 F(z) = G(y) 确定 的 曲线 上 ， 
因而 是 奇异 的 . (习题 5 包含 一 个 特殊 情形 . ) 


.用 U 表示 一 及 0 中 的 均匀 分 布 , 用 了 表示 一 所 中 的 三 角形 分 布 见 2.4 节 (bj], 那 


么 F 太 U 和 下 女 T 的 密度 为 


h 
hr [F(z +h) — F(z) 和 h™? / [F(z +9%) — F(z — wldy. 


. 设 独立 变量 X 和 YY 服从 期 望 为 pt 和 qt 的 泊 松 分 布 . 如 果 Tk 是 2.7 节 (7.1) 中 定义 


的 贝 寒 尔 函数 ,证明 
P{X —Y =h) = 0- VB/ ln (VP). 
对 于 一 个 使 得 
Es 
v= Par} 
在 -a < a < a 中 存在 的 分 布 函 数 用 p(a)P#{dz} = eesFtdz} 定义 一 个 新 分 


布 P#. 设 的 和 三 是 两 个 具有 这 种 性 质 的 分 布 ,， F = 所 克 及 .证明 (用 明显 的 记 
号 ), p(a) = pi(o)p2(0), Et# = PEE. 
设 下 具有 质量 为 pt pz,… 的 原子 a1,02,…. 用 了 表示 p1,p2,… 的 最 大 值 . 利用 5.48 
节 的 引 理 1 证明 
(a) 除了 已 集中 在 有 限 多 个 有 相等 质量 的 原子 上 的 情形 外 , 下 太 FF 的 原子 的 质量 严格 
小 于 ps 


@ 本 题 包含 一 个 具有 正 态 边缘 分 布 的 非 正 态 分 布 的 新 例子 ( 见 3.9 节 中 的 习题 2 和 习题 3). 这 应 归 


功 于 古 莫 别 尔 (Gumbel)- 


12. 


13. 


14. 


15. 


16. 


17. 


18. 


19. 


20. 


21. 


22. 
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(b) 对 于 对 称 化 了 的 分 布 F, 原点 是 一 个 质量 为 m = 学 p? 的 原子 , 其 他 的 原子 的 
质量 严格 地 小 于 p'. 

Rs 中 的 随机 向 量 . 设 工 是 两 个 具有 随机 方向 的 独立 单位 向 量 , 即 端点 是 在 单位 球面 上 
均匀 分 布 的 合 向 量 . 证 明 : 对 于 0<t< 2, P{L < 村 = 女 /2. [ 见 5.4 节 例 (e). ] 
设 Xx 是 相互 独立 的 变量 , 取 值 0 和 1 的 概率 都 等 于 到 5.4 节 例 (d) 已 证 明了 , X = 
开 2-*Xx 在 责 I 中 是 均匀 分 布 的 . 证 明 半 2-s+Xax 的 分 布 是 奇异 的 . 
(a) 如 果 FF 有 这 样 一 个 密度 f, 使 得 f? 是 可 积 的 , 那么 F 太 FF 的 密度 fo 是 有 界 的 . 
(b) 利用 4.2 节 中 的 平均 逼近 定理 证 明 : 如 果 是 有 界 的 ,那么 户 是 连续 的 . 
[如 果 f 在 一 个 点 的 附近 是 无 界 的 ,那么 可 能 出 现 这 样 的 情况 ,对 于 每 个 mw f” 都 是 
无 界 的 . 见 11.3 节 例 (a). ] 
利用 施 瓦 效 不 等 式 证 明 : 如 果 X 是 一 个 正 变量 ， 那 么 对 于 所 有 的 p > 0,E(X-?) > 
(EB(X?))™. 
设 X 和 Y 有 这 样 的 密度 f 和 g, 使 得 当 z <a 时 , f(z) > g(z); 当 z>a 时 , f(z) < 
g(x). 证 明 : E(X) < E(Y). 而 且 , 如 果 对 于 z < 0 有 f(z) = g(z) = 0, 那么 对 于 所 有 
的 上 有 EE(X)* < BE(Y*). 
设 X1,X2,… 是 相互 独立 的 , 且 有 共同 分 布 F. 设 N 是 一 个 母 函 数 为 P(s) 的 正 整 值 
随机 变量 . 如 果 N 与 Xi 独立 ,那么 max[X1,…, Xn] 的 分 布 为 P(F). 
设 Xi,X2，…Xn, 是 相互 独立 的 , 且 有 共同 的 连续 分 布 F. 设 X = max[X1,…, Xn]， 
Y = min[X1,…,Xn]. 那么 

P{X<zY> 纪 =(F(z) 一 FOOD)”， 3< 

P{Y > YX =z}=[(F(z) 一 F(OD))AF(z)]” 


.利用 同样 的 记号 ,对 于 每 个 固定 的 <n 有 


= 
P{Xr < 2IX=t}= { n F(t)’ 
和 rt 


2<é 


(a) 通过 考察 事件 {Xi = X} 的 直观 含义 ，(b) 在 形式 上 由 (9.4) 来 推导 上 述 等 式 . 
续 . 证 明 , 

E(XKIX = 二 一 2 /setan+ 二 
随机 和 . 在 9 节 例 (c) 中 , 设 Xi 等 于 1 和 -1 的 概率 分 别 为 p 和 4 = 1 一 P 如 果 
是 一 个 期 望 为 的 泊 松 变量 , 那么 Sw 的 分 布 与 问题 9 中 出 现 的 分 布 相等 
混合 . 设 (9.9) 中 的 分 布 G 的 期 望 为 m(z), 方差 为 a?(z). 证 明 : 混合 分 布 0 的 期 望 
与 方差 为 


i ee je 
Be / m(z)p{dz}, 6= 人 oz(z)utdz} 十 了 (m2(z) ~ a )u{dz}. 
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23. 利用 明显 的 记号 E(E(Y|X)) = E(Y), 但 是 
Var(Y) = E(Var(Y|X)) + Var(E(Y|X)). 


习题 22 是 一 个 特殊 情形 . 
24. 随机 和 . 在 5.9 节 例 (c) 中 , E(Sw) = E(N)E(X)， 


Var(Sw) = E(N)Var(X) + (E(X))?Var(N). 


直接 证 明 这 两 上 等 式 , 并 证 明 它们 包含 在 习题 22 和 习题 23 中 . 

注 ”以 下 的 习题 涉及 5.9 节 的 脚注 中 定义 的 单 虱 分布 的 卷 积 有 人 猜想 两 个 单 峰 分 布 
的 卷 积 还 是 单 峰 的 . 钟 开 莱 构 造 了 一 个 反例 . 习题 25 包含 另外 一 个 反例 . 习题 26 证 明 
了 这 个 猜想 对 于 对 称 9 分 布 是 正确 的 . 这 个 结果 应 归功 于 温 特 纳 (Wintner). 


25. 对 于 0<z< 1 令 w(z) = 1 对 于 z 的 其 他 值 令 wz) = 0. 令 


"= 二 (有 + 与 和 

其 中 0<a<b. 如 果 e 和 a 很 小 ,5b 很 大 , 那么 w=v*wv 不 是 单 峰 的 , 虽然 ov 是 单 峰 
的 . 
为 避免 计算 的 提示 两 个 均匀 密度 的 卷 积 是 三 角形 密度 ， 从 而 w(a) > ea ao(b) > 
ea 1,w 的 从 5 到 2 的 积分 > 3(1 下)?. 由 此 推出 , w 应 在 a 和 6 的 中 间 达 到 最 小 
值 . 

26. 设 已 是 一 个 均匀 分 布 ，G 是 一 个 单 峰 分 布 ` 如 果 天 和 G 都 是 对 称 的， 用 简单 的 微分 
法 证 明 : 卷 积 FP 太 G 是 单 峰 的 . 由 此 推出 (不 用 进一步 的 计算 ): 当 已 是 对 称 均匀 分 布 
的 任 一 混合 时 ， 上 一 陈述 仍然 正确 . 因此 ,对称 单 峰 分 布 的 卷 积 是 单 冉 的 . 


@ 关于 在 非 对 称 的 情形 产生 的 困难 , 见 I A. Ibragimov, Theory of Probbility and fts Applications, 
vol.1(1956)pp.225-260.[Translations.] 
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本 章 是 为 了 在 供 独立 阅读 的 各 章 之 间 避 免 重复 和 交叉 参考 而 写 的 . 例如 , 我 们 
将 分 别 地 用 半 群 方法 (第 9 章 )、 伟 里 叶 分 析 (第 18 章 )、( 至 少 部 分 地 用 ) 拉 普 拉 斯 
变换 (第 13 章 ) 来 独立 地 讨论 稳定 分 布 理 论 . 在 适当 的 地 方 给 出 定义 和 例子 可 以 节 
省 篇 幅 , 并 且 可 以 不 必 考 虑 方法 的 纯正 而 仔细 研究 一 些 基本 关系 . 

本 章 所 包含 的 各 个 课题 在 逻辑 上 不 一 定 有 联系 : 排队 过 程 和 鞭 论 或 稳定 分 布 
理论 几乎 没有 什么 关系 . 本 章 不 是 为 连续 阅读 而 写 的 , 应 该 等 到 以 后 用 到 哪 一 节 时 
再 回 过 来 阅读 它 . 6.6 节 ~6.9 节 之 间 相互 有 些 联系 ,但 与 其 他 部 分 无 关 . 它们 讨论 
了 本 书 中 别 的 地 方 不 包含 的 一 些 内 容 . 


6.1 了: 中 的 稳定 分 布 


稳定 分 布 作为 正 态 分 布 的 一 种 自然 的 推广 , 起 着 越 来 越 大 的 作用 . 为 了 便于 叙 
述 稳定 分 布 , 我 们 引入 缩写 记号 


U8V (1.1) 


来 表示 随机 变量 UV 和 Y 有 相同 的 分 布 . 因此 , UaV + 表示 U 和 VV 的 分 布 的 差 
别 仅 在 于 位 置 参 数 和 尺度 参数 不 同 .( 见 5.2 节 的 定义 1.) 在 本 节 中 ,XX, X1, XX2,… 
表示 具有 共同 分 布 尺 的 独立 随机 变量 ，Sn = Xi 十 … 十 Xn. 
定义 1 我 们 称 分 布 忆 为 (广义 ) 稳定 的 , 如果 对 于 每 个 n, 都 存在 常数 cn > 0,nn， 
使 得 

Sn cnX + Yn, (1.2) 


并 且 民 不 集 中 在 一 点 上 . 称 忆 为 严格 稳定 的 ,如果 (1.2) 对 于 yn = 0 成立 .“， 
例子 可 以 在 6.2 节 中 找到 . 稳定 分 布 的 某 些 基本 性 质 的 初等 推导 是 如 此 具有 启 

发 性 ,以致 于 我 们 不 惜 重复 来 讨论 它们 . 第 9 章 和 第 17 章 中 发 展 起 来 的 系统 的 理 

论 不 依赖 于 下 列 讨论 . 

定理 1 正规 化 常数 具有 cn 二 ni/ 的 形式 , 其 中 0 < a < 2. 我 们 称 常 数 ac 为 刀 

的 特征 指数 . 


@ 关于 另外 一 种 形式 见习 题 1. 
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证 ”利用 对 称 化 可 以 大 大 简化 证 明 . 如 果 已 是 稳定 的 ,那么 Xi 一 Xo 的 分 布 ?RR 
也 是 稳定 的 , 正规 化 常数 cn 相同 . 因此 ， 只 要 关于 对 称 稳定 的 R 来 证 明 这 个 断言 
就 行 了 . 

我 们 从 一 个 简单 的 陈述 开始 ，Sm+n 是 独立 变量 Sm 与 Sn+n 一 Sm 的 和 ，Sm 
和 Sm+n 一 Sm 的 分 布 分 别 与 cnX 和 cnX 的 分 布 相同 . 因此 , 对 于 对 称 稳定 分 布 ， 


CmtnX ScmX1 + cnX2. (1.3) 


类 似 地 , 和 Srk 可 以 分 解 成 7 个 独立 组 , 每 组 有 大 项 , 从 而 对 于 所 有 的 7 和 外, cri = 
crck. 对 于 形 如 n=" 的 下 标 , 我 们 用 归纳 法 得 到 ， 


如 果 n=r"， 那 么 cn = 中 (1.4) 
其 次 设 v = m+n, 并 注意 到 , 由 (1.3) 中 变量 的 对 称 性 , 对 于 t > 0, 我 们 有 
P{X>t}> 了 Ce > tcv/cn}. (1.5) 


由 此 推出 , 对 于 v > n, 比 cn/c 是 有 界 的 . 
对 于 任 一 整数 7, 存在 唯一 的 一 个 a, 使 得 cr = ra/“. 为 了 证 明 cn = na/", 只 
需 证 明 : 如 果 cp = pr/8, 那么 8=a. 由 (1.4) 知 ， 


如 果 n=， 那 么 cn = mlei 
如 果 v=pA， 那 么 co = vw/8. 

但 是 对 于 每 个 v= p*, 存在 一 个 = 六, 使 得 mn < vs rn. 于 是 
cv = /8 < (mn)UB = raca/p. 


因为 比 cn/cs 是 有 界 的 , 所 以 8 < a. 并 换 > 和 p 的 位 置 ,可 以 类 似 地 得 到 6 > a. 
因而 8= a 

为 了 证 明 a < 2, 我 们 说 明 , 正 态 分 布 是 特征 指数 为 a = 2 的 稳定 分 布 , 对 于 
此 分 布 , (1.3) 化 为 方差 的 加 法 法 则 , 加 法 法 则 蕴含 , 任 一 具有 有 限 方差 的 稳定 分 布 
必然 对 应 于 a = 2. 因此 , 为 了 完成 证 明 ， 只 需 证 明 , 满足 a > 2 的 任 一 稳定 分 布 
都 有 有 限 方差 

对 于 对 称 分 布 , 当 w = 0 时 (1.2) 成 立 . 因此 ， 可 以 选择 这 样 的 t， 使 得 对 于 
所 有 的 mw 了 P{lSn| > tcn} < 玉 由 对 称 性 , 这 蕴含 n[1 一 R(tcn)] 是 有 界 的 [ 见 5.5 节 
(5.10)]. 由 此 推出 , 对 于 所 有 的 > > 上 和 适当 的 常数 M,ze[1- R(z)] < M. 因此 , 区 
间 2*-1 < zx <2* 对 卫 (X2) 的 积分 的 贡献 以 M2Q-~%)* 为 界 . 对 于 a > 2, 这 是 一 个 
收敛 级 数 的 通 项 > 
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稳定 分 布 理论 被 这 样 一 个 令 人 满意 的 事实 大 大 简化 ， 即 在 实际 中 可 以 不 考虑 
中 心 常数 vn. 这 是 因为 我 们 能 以 任意 的 方式 规定 分 布 RR 的 中 心 , 即 可 以 把 R(z) 换 
为 R(z + 昌 . 下 列 定理 表明 , 除 a = 1 外 , 我 们 可 以 利用 这 种 自由 性 把 w 从 (1.2) 
中 消去 . 
定理 2 ”如果 忆 是 稳定 的 ， 且 指数 ai 关 1， 那 么 可 以 选择 这 样 一 个 中 心 常数 b， 使 
得 RR(z 十 昌 是 严格 稳定 的 . 
证 Smn 是 mm 个 独立 变量 之 和 , 其 中 每 个 变量 的 分 布 与 coX 十 vn 的 分 布 相同 . 因 
此 

Smn 生 cnSm + mvn ScncmX + env + mon. (1.6) 


因为 m 和 nn 起 的 作用 相同 , 所 以 这 表示 恒 有 
(cn — Nn)vm = (cm — m)vn. (1.7) 


当 a = 1 时 ， 这 个 陈述 是 无 意义 的 , ?但 是 当 a 承 1 时 ， 这 理 含 ， 对 于 所 有 的 
n,vn = b(cn 一 n). 最 后 由 (1.2) 可 见 , n 个 与 X' 一 b 有 相同 分 布 的 变量 之 和 5 | 
足 条 件 5% 和 cnX' 

关系 式 (1.3) 是 由 (1.2) 在 vw = 0 这 个 唯一 的 假设 下 推导 出 来 的 ， eed 
所 有 的 严格 稳定 分 布 都 成 立 . 这 蕴含 , 当 比 s/t 是 有 理 数 时 ， 


sa Xi + ti/o X22(s 十 四 MeX. (1.8) 


利用 简单 的 连续 性 就 可 得 到 ®. 
定理 3 如 果 民 是 严格 稳定 的 , 且 指 数 为 a, 那么 (1.8) 式 对 所 有 的 s>0 和 t>0 
部 成 立 ， 

对 于 正 态 分 布 , (1.8) 式 只 是 重新 叙述 了 一 下 方差 的 加 法 法 则 . 一 般 来 说 , (1.8) 
式 列 含 , 所 有 的 线性 组 合 aiXi + a2X2 都 属于 同一 类 型 . 

正 态 分 布 R 之 所 以 重要 ,主要 是 由 于 中 心 极限 定理 . 设 X1,… ,Xn 是 具有 共 
同 分 布 的 相互 独立 变量 , 而 且 它们 期 望 为 0, 方差 为 1 令 Sn = Xi 十 … 十 Xn. 
中 心 极限 定理 @ 断言 ，Snm -+ 的 分 布 趋 于 R. 对 于 方差 不 存在 的 分 布 , 也 有 类 似 的 
极限 定理 , 但 必须 用 同 的 方式 选择 正规 化 常数 有趣 的 是 , 稳定 分 布 是 作为 这 样 的 
极限 出 现 , 而且 只 有 稳定 分 布 可 以 作为 这 样 的 极限 . 下 列 术 语 将 有 益 于 讨论 这 个 问 
题 . 
定义 2” 称 独立 随机 变量 Xk(k = 1,2,.…) 的 分 布 FF 属于 分 布 尽 的 吸引 域 ， 如 果 
存在 这 样 的 正规 化 常数 an > 0,bn, 使 得 url(Sn 一 bn) 的 分 布 赵 于 已 . 

@ 关于 a = 1 的 情形 , 见习 题 4 


@ 关于 稳定 分 布 的 边 续 性 , 见习 题 2. 
旬 中 心 极限 定理 证 明了 , 正 态 分 布 是 唯一 的 具有 方差 的 稳定 分 布 . 
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最 后 一 个 陈述 可 以 改 述 为 : 当 且 仅 当 玉 是 稳定 的 时 候 , 玉 有 一 个 吸引 域 . 实际 
上 , 根据 定义 , 每 个 稳定 的 已 属于 它 自 己 的 吸引 域 . 由 定理 1 中 所 用 的 论证 , 似乎 
不 可 能 有 其 他 的 分 布 能 作为 这 种 极限 出 现 . 

我 们 的 结果 有 相当 重要 且 出 人 意料 的 推论 . 例如 , 考虑 满足 (1.8)( 其 中 a < 1) 
的 稳定 分 布 . 平均 值 (Xi +… + Xn)/n 和 Xin-1+WVe 有 相同 的 分 布 ,最 后 一 个 因 
子 趋 于 oo. 粗略 地 说 , n 个 变量 的 平均 值 很 可 能 远 远大 于 任 一 给 定 的 分 基 Xk. 这 
只 在 最 大 项 Mn = max[Xi,…,Xn] 可 能 增加 到 非常 大 且 受 总 和 5n 的 影响 非常 大 时 
才 可 能 发 生 . 更 精确 的 分 析 证 实 了 这 个 结论 . 在 正 变量 的 情形 下 ， 比 Sn/Mv 的 期 
望 趋 于 (1 一 a)-!, 这 对 任 一 其 分 布 属于 我 们 的 稳定 分 布 的 吸引 域 的 序列 也 正确 ( 见 
13.11 节 的 习题 26. ) 
关于 历史 的 注 ”稳定 分 布 的 一 般 理论 是 由 列 维 (Lévy)(1924) 开创 的 了 ， 他 求 出 了 
所 有 严格 稳定 分 布 的 健 里 叶 变 换 . (最 初 称 其 他 的 分 布 为 拟 稳 定 的 . 正如 我 们 已 经 看 
到 的 那样 , 只 有 当 a = 1 时 它们 才 起 作用 . 列 维和 辛 钦 两 个 人 分 析 了 这 种 情形 . ) 由 
于 发 现 了 无 穷 可 分 分 布 , 使 一 个 处 理 整 个 理论 的 新 的 简单 的 方法 成 为 可 能 的 了 . 这 
个 新 方法 ( 仍 以 傅 里 叶 分 析 为 基础 ) 同样 应 归功 于 列 维 (1937). 多 勃 林 (Doblin) 对 吸 
引 域 所 作 的 精辟 的 分 析 (1939) 激发 了 人 们 对 此 理论 的 兴趣 . 他 的 准则 首次 涉及 了 
正则 变化 函数 . 虽然 许多 作者 作 了 改进 工作 并 得 到 了 新 的 结果 , 现代 理论 仍然 带 有 
这 个 开创 性 工作 的 痕迹 . 第 18 章 包含 用 古典 傅 里 叶 方法 对 此 理论 所 作 的 一 个 简洁 
的 处 理 方法 , 而 第 9 章 则 用 一 种 直接 方法 讨论 了 同一 理论 , 这 种 方法 与 马尔 可 夫 过 
程 中 的 现代 方法 是 一 致 的 . 卡拉 马 塔 (Karamata) 的 正则 变化 函数 理论 的 系统 利用 ， 
使 许多 准则 的 极 大 简化 和 统一 成 为 可 能 . 在 8.8 节 和 8.9 节 中 给 出 了 这 个 理论 的 一 
个 改进 了 的 形式 . 


6.2 例 


例 (a) ”期 望 为 0 的 正 赤 分 布 是 严格 稳定 的 , 是 cn = Vi 
例 (b) ”具有 任意 位 置 参数 的 林 西 分 布 有 密度 
1 c 
Feryepr 
卷 积 性 质 2.4 节 (4.6) 表明 , 它 是 稳定 的 , 且 a = 1. 
例 (c) 满足 a 一 当 的 稳定 分 布 .分 市 


F(z)=21— R/Va), 2>0 (2.1) 
@ 柯 西 提 到 过 对 称 稳定 分 布 的 伟 里 叶 变换 ， 但 是 它们 确实 对 应 于 概率 分 布 这 个 事实 并 不 明显 . 波 利 
亚 对 a < 1 的 情形 解决 了 这 个 问题 .6.2 节 例 (d) 的 替 尔 特 斯 马克 (Holtsmark) 分 布 是 天 文学 家 

们 所 热 知 的 ,但 数学 家 们 却 不 知道 
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的 密度 为 5 
f(z)= 7 z>0. (2.2) 


[对 于 z < 0, f(z) = 0. ] 这 是 一 个 严格 稳定 分 布 ,其 正规 化 常数 为 cn = m2. 

这 可 以 利用 初等 积分 法 来 证 明 , 但 是 把 这 个 断言 作为 下 有 吸引 域 这 个 事实 的 
推论 是 更 可 取 的 . 实际 上 ， 在 对 称 随机 游 动 中 , 设 5. 是 随机 游 动 第 7 次 回 到 原点 
的 时 刻 . 显然 ,， 5" 是 了 个 独立 同 分 布 随机 变量 (逐次 返回 之 间 的 等 待 时 间 ) 之 和 . 我 
们 在 第 1 卷 3.7 节 (7.7) 的 末尾 证 明了 


PfS- < rt} 一 FU，r 一 oo. (2.3) 


因此 有 一 个 吸引 域 , 从 而 是 稳定 的 . [在 例 (e) 中 继续 讨论 . ] 
例 (d) ”恒星 的 引力 场 ( 霍 尔 特 斯 马克 分 布 )、 用 天 文学 的 术语 来 说 , 问题 是 计算 恒 
星系 对 一 个 随机 选择 的 点 O 的 引力 的 z 分 量 . 基本 思想 是 要 把 恒星 系 作为 一 个 具 
有 “随机 变化 的 质量 ” 的 点 组 成 的 “随机 集合 体 ”. 利用 泊 松 分 布 等 术语 可 以 把 这 些 
概念 精确 化 ,但 是 幸好 我 们 所 讨论 的 问题 不 需要 什么 精确 概念 . 

我 们 约定 把 恒星 系 的 密度 作为 一 个 自由 参数 来 处 理 , 并 设 X 表示 密度 为 和 的 
恒星 系 的 引力 的 = 分 基 . 我 们 来 求 这 种 分 布 的 可 能 类 型 . “随机 恒星 集合 体 ” 的 直观 
概念 要 求 , 两 个 密度 为 和 + 的 独立 集合 体 可 以 结合 成 一 个 密度 为 s 十 t 的 集合 体 . 
从 概率 上 讲 , 这 相当 于 假定 , 两 个 与 X, 和 Xe 有 相同 分 布 的 独立 变量 之 和 与 Xe++ 
有 相同 的 分 布 . 我 们 把 这 个 假定 用 符号 表示 为 


bp By dep. oe (2.4) 


考虑 到 密度 从 1 变 为 相当 于 长 度 单位 从 1 变 为 1/ ,以 及 引力 与 距离 的 平方 成 
反比 , 我 们 可 以 看 出 Xe 和 培 X1 应 当 有 相间 的 分 布 这 意味 着 所 有 的 X 的 分 布 的 
不 同 之 处 仅 在 尺度 参数 上 , 且 (2.4) 化 为 带 有 a = 5 的 (1.8). 换 句 话说 , X、 的 分 布 


是 对 称 稳定 的 ,指数 为 3. 可 以 证 明 ， 只 存在 一 个 这 样 的 分 布 (如 果 两 个 分 布 仅仅 是 
尺度 参数 不 同 , 那么 把 它们 看 作为 一 个 分 布 ) 因此 , 我 们 没有 利用 高 深 的 理论 而 解 
决 了 我 们 的 问题 ， 天 文学 家 堆 尔 特 斯 马克 利用 另外 一 种 方法 得 到 了 一 个 等 价 的 竺 
案 (见习 题 7), 特别 值得 注意 的 是 , 这 个 结果 是 在 列 维 的 工作 之 前 得 到 的 . 

例 (e) 布朗 运动 的 首次 通过 时 间 . 我 们 从 一 维 扩散 过 程 的 概念 开始 , 即 假设 增 量 
X(s+ 日 一 X(s) 对 于 不 相交 的 时 间 区 间 是 独立 的 , 而且 它 有 方差 为 + 的 对 称 正 态 分 
布 . 通常 假设 轨道 是 连续 地 依赖 于 时 间 的 . 如果 X(0) = 0, 那么 存在 一 个 这 样 的 时 刻 
Ts, 使 质点 在 这 个 时 刻 首 次 到 达 位 置 4 > 0. 为 了 导出 分 布 函数 F(t) = P{Ts 和 甘 ， 
我 们 注意 到 ， 可 加 过 程 具有 完全 无 后 效 性 ( 强 马尔 可 夫 性 ) 这 表示 时 刻 T 与 时 刻 
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Ts +t 之 间 的 模 华 标的 增 晤 X(t+76) a 与 在 To 之 前 的 过 程 是 独立 的 . 为 到 达 位 
置 a+b > a, 质点 必须 首先 到 达 a. 我 们 断言 ,在 到 达 a 十 之 前 的 剩 人 等待 时 间 
Tao 一 Ts 与 Ta 独立 ,并 且 与 家 有 相同 的 分 布 . 换 句 话说 ,Fu 妇 忆 = 及 +. 但 是 ， 
转移 概率 只 依赖 于 比 z?/t， 因 此 ZT 一 定 和 a7i 有 相同 分 布 , 这 说 明 诸 分 布 及 的 
不 同 之 处 仅 在 尺度 参数 上 ,因而 它们 是 物 定 的 指数 为 a 一 了。 

这 个 以 因 次 分 析 为 基础 的 论证 证 明了 首次 通过 分 布 的 稳定 性 ， 但 没有 推导 出 
明显 的 表达 式 . 为 了 证 明 已 和 例 (oj 中 的 分 布 重合 , 我 们 利用 一 个 以 对 称 性 为 基础 的 
推理 (所 谓 的 反射 原理 ) 由 于 假设 轨道 是 连续 的 ,所 以 只 有 当 在 某 个 时 刻 Ti < t+ 加 
道 穿 过 水 平 线 a。 时, 事件 {X(b) > dj 才 可 能 发 生 . 车 T=7 < 如 则 X(7) = 由 
对 称 性 ，X(b) - X(r) > 0 的 概率 等 于 了. 因此 ， 


P{T <t} =2P{X(t) > a} = 2[ — R(a/Vi)], (2.5) 


此 式 等 价 于 (2.1). 
例 (f) 二 维 布朗 运动 的 首 中 点 ， 二 维 布朗 运动 是 由 一 对 独立 的 一 维 布朗 运动 
(X(),Y() 构 成 的 . 我 们 感 兴趣 的 是 轨道 首次 到 达 直 线 z= a > 0 的 点 (a, Za). 和 上 
例 一 样 , 我 们 注意 到 , 轨道 只 有 在 通过 直线 z = a 之 后 才 可 能 到 达 直 线 z = a+b > a; 
取 (a, Za) 为 新 原点 , 我 们 断言 ,Za+。 和 两 个 与 Z。 和 2Z。 有 相同 分 布 的 独立 变 其 之 
和 具有 相同 的 分 布 . 类 似 地 ,可 证 Ze 和 a2: 有 相同 的 分 布 ， 因此 2Z。 的 分 布 是 对 
称 稳定 的 , 指数 为 a = 1. 只 有 柯 西 分 布 满足 这 些 条 件 , 因此 首 中 点 Zo 服从 柯 西 分 
布 . 

这 个 有 启发 性 的 因 次 分 析 没有 确定 尺度 参数 . 为 了 把 它 明 确 地 计算 出 来 , 注意 
Za = 了 (Te)， 其 中 Ta 是 首次 到 达 直线 z = a 的 时 刻 . 它 的 分 布 已 在 (2.5) 中 给 出 ， 
而 Y(t) 有 一 个 方差 为 t 的 正 态 密度 . 由 此 推出 ,2。 的 密度 为 9 


r @—$z"/t ae 一 二 a2/ a 
0 


WV a (2.6) 


(我 们 这 里 得 到 了 过 程 的 从 属 关系 的 一 个 例子 , 我 们 将 在 10.7 节 中 再 回来 讨论 它 . ) 
例 (g) 经济 学 中 的 稳定 分 布 . 臣 德 布 罗 (B. Mandelbrot) 利 用 与 上 面 两 例 中 的 因 
次 分 析 有 关 的 论证 证 明了 , 各 种 经 济 过 程 (特别 是 收益 分 布 ) 服从 稳定 (或 “ 列 维 - 
帕 雷 托 ") 分 布 . 到 现在 为 止 , 这 个 在 经 济 学 家 中 引起 广泛 注意 的 有 趣 的 理论 的 威力 
应 归功 于 理论 的 论证 而 不 是 归功 于 观察 . [关于 这 个 分 布 的 尾部 与 许多 (从 城市 的 大 
小 到 单词 的 频率 ) 经 验 现 象 的 明显 拟 合 , 见 2.4 节 (b). ] 


@ 利用 代 换 4 = 当 (z? + a?)/t 可 把 补 积 冰 数 化 为 -了 
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例 (h) ”乘积 , 在 带 有 不 同 指数 的 稳定 分 布 之 间 有 许多 奇特 的 关系 . 最 有 趣 的 一 个 
可 用 下 面 的 命题 形式 给 出 . 设 X 和 了 分 别 是 具有 特征 指数 a 和 有 的 严格 稳定 的 
独立 变量 . 设 Y 是 一 个 正 变量 (从 而 6 < 1). 乘积 XYHe 的 分 布 是 特征 指数 为 a 
的 稳定 分 布 , 特别 地 , 正 态 变量 与 例 (c) 中 的 稳定 变量 的 平方 根 的 乘积 是 一 个 柯 西 
变量 . 

这 个 断言 可 以 作为 关于 从 属 过 程 的 一 个 定理 的 简单 推论 9 [10.7 节 例 (cj]， 而 
且 , 容易 用 传 里 叶 分 析 来 验证 它 (17.12 节 的 习题 9), 且 对 于 正 变量 , 也 可 以 用 拉 普 
拉 斯 变换 来 验证 它 [13.7 节 (e) 和 13.11 节 的 习题 10]. 


6.3 ”Rl 中 的 无 穷 可 分 分 布 


定义 1 称 司 是 无 穷 可 分 的 ,如果 对 于 每 个 n, 都 存在 一 个 分 布 ,使 P= Fn 
换 句 话说 @， 当 且 仅 当 对 于 每 个 mn， 玉 可 以 表示 为 n 个 具有 共同 分 布 Fn 的 独 
立 随机 变量 之 和 5% = Xin 十 … 十 Xnn 的 分 布 时 ，, 玉 是 无 穷 可 分 的 . 
这 个 定义 在 任意 维 空间 中 都 成 立 , 但 是 目前 我 们 只 讨论 一 维 分 布 ， 应 该 指出 ， 
无 穷 可 分 性 是 一 种 类 型 的 性 质 , 即 下 以 及 与 已 仅 差 一 个 位 置 参 数 的 分 布 都 是 无 穷 
可 分 的 . 稳定 分 布 是 无 穷 可 分 的 , 可 以 通过 到 与 下 只 差 一 个 位 置 参数 这 个 事实 来 
区 分 . 
例 (a) 由 2.2 节 (2.3) 卷 积 的 性 质 , 所 有 的 工分 布 (包括 指数 分 布 ) 都 是 无 穷 可 分 
的 . 在 第 1 卷 12.2 节 (e) 中 已 证 明 , 这 对 于 它们 在 离散 情形 的 相应 分 布 ,“ 负 二 项 分 
布 "( 包 含 几 何 分 布 ) 也 是 正确 的 . 
例 (b) ” 泊 松 分 布 和 复合 泊 松 分 布 都 是 无 穷 可 分 的 . 实际 上 , 所 有 的 无 穷 可 分 分 布 
都 是 复合 泊 松 分 布 的 极限 . 
例 (c) “与 贝 塞 尔 函 数 有 关 的 2.7 节 (7.13) 分 布 是 无 穷 可 分 的 , 但 这 决 不 是 明显 的 . 
见 13.7 节 例 (d). 
例 (d) 集中 在 一 个 有 穷 区 间 上 的 分 布 不 是 无 穷 可 分 的 , 除非 它 集 中 在 一 点 上 . 
实际 上 , 如 果 以 概率 1 有 |Sn| < a, 那么 |Xkn| < an-1， 从 而 Var(Xkn) < a2n-2. 
因此 , 的 方差 < azn ,所 以 它 等 于 零 . > 
回 到 定义 1, 我 们 来 考虑 , 如 果 去 掉 Xk,n 有 相同 的 分 布 这 个 要 求 , 而 只 要 求 对 


@ 为 了 以 最 少 的 计算 作 直 接 验 证 , 通过 首先 计算 在 给 定 Yi = yi 和 12 = yo 的 条 件 下 2 = X1 以 鳌 十 
Xa 8%/ 了 H 的 条 件 分 布 来 求 2 的 分 布 . 2 的 分 布 是 yi 十 yz 的 一 个 函数 , 变量 代 换 u = V1 十 ya,v 二 
如 一 V2 表明 它 与 两 个 被 加 数 的 分 布 只 差 一 个 尺度 因子 . 对 于 n 个 类 似 项 之 和 可 作 同 样 的 计算 

@ 不 言 而 喻 ， 随 机 变量 Xk,n 只 是 为 了 使 记号 更 简单 更 直观 而 引进 的 . 对 于 固定 的 n， 假 设 变 量 
X1,n,… ,Xn,n 是 相互 独立 的 ， 但 变量 Xj,m 和 Xk,n( 其 中 mm 天 n) 不 一 定 定义 在 同一 概率 
空间 上 . ( 换 句 话说 ,Xim 和 Xk,n 的 联合 分 布 不 一 定 存在 . ) 这 个 注 一 般 也 适用 于 三 角形 阵列 - 
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于 每 个 n, 存在 m 个 分 布 i.n,…, Fnn, 使 得 
王 王 百 ,n 址 -… 真 Fnn， (3.1) 


那么 将 会 发 生 什么 情况 . 
这 种 一 般 化 导致 一 种 新 现象 , 我 们 最 好 用 例子 来 说 明 . 
例 (e) ”如 果 己 是 无 穷 可 分 的 , U 是 任意 的 , 那么 G = U 太 F 可 以 写成 (3.1) 的 形 
式 , 其 中 G1n = U, 并 且 所 有 其 他 的 Gk.n 都 等 于 Fn-1. 这 里 第 一 个 分 量 所 起 的 作 
用 与 所 有 其 他 分 基 所 起 的 作用 完全 不 同 . 
例 (f) 考虑 一 个 相互 独立 的 随机 变 其 的 收敛 级 数 X = 守 人 X 的 分 布下 是 
X1,X2，…，Xn-1 的 分 布 与 剩余 变量 (Xn 十 Xn+1 十 …) 的 分 布 的 卷 积 , 因此 已 具 
有 (3.1) 的 形式 . 我 们 称 这 种 分 布 为 无 穷 者 积 ， 以 后 要 对 它 进行 研究 . 1.11 节 例 (c) 
表明 , 均匀 分 布 也 是 这 样 的 分 布 . p> 
这 些 例子 的 显著 特点 是 单个 分 基 X1n 对 Sn 的 贡献 是 非常 重要 的 ,而 在 分 量 
有 相同 的 分 布 的 情形 ， 每 个 分 基 的 贡献 趋 于 零 . 我们 希望 把 无 穷 可 分 分 布 与 包含 
“许多 小 分 基 ” 的 曲 型 极限 定理 联系 起 来 . 为 此 ， 必 须 附 加 下 列 要 求 ， 即 单个 变量 
Xkn 在 下 述 的 意义 上 是 渐 近 可 忽略 的 : 对 于 每 个 e > 0， 当 n 充分 大 时 ， 


P{Xknl >e <e， (k=1,.…,n). (3.2) 
利用 8.2 节 的 术语 , 这 表示 Xkn 对 大 = 1,…,n 依 概率 一 致 地 趋 于 零 . 这 种 类 型 的 
变 基 系 经 常 出 现 , 为 了 方便 起 见 , 我 们 给 它们 起 一 个 名 称 . 
定义 2 所 谓 一 个 三 角形 阵列 指 的 是 这 样 一 个 二 重 随 机 变量 序列 {Xkn}(k ==1,.…,n,n 一 


1,2,…), 使 得 第 n 行 的 变量 Xi,n,… ,Xnmn 是 相互 独立 的 . 

称 此 阵列 为 一 个 零 阵 列 (或 有 渐 近 可 忽略 的 分 量 )， 如 果 (3.2) 成 立 . 

更 一 般 地 , 可 以 考虑 第 n 行 含有 rn 个 变量 的 阵列 , 其 中 mm 一 co. 这 种 一 般 化 
得 不 到 多 大 收获 . (见习 题 10.) 
例 (g) ” 设 {Xj} 是 一 个 独立 同 分 布 的 随机 变量 序列 ，Sn = Xi + … 十 Xn. 正规 
化 了 的 序列 Snax! 表示 一 个 三 角形 阵列 的 第 n 行 之 和 ,其 中 Xi,n = Xkan1. 如 果 
an 一 co, 那么 这 个 阵列 是 一 个 零 阵列 . 在 第 1 卷 6.6 节 中 推导 泊 松 分 布 时 , 考虑 过 
一 个 不 同类 型 的 阵列 . > 

在 第 9 章 和 第 17 章 中 , 我 们 将 证 明 一 个 值得 注意 的 事实 , 即 一 个 零 三 角形 隆 
列 的 行 之 和 Sn 的 极限 分 布 (如 果 它 存在 ) 是 无 穷 可 分 的 . 只 要 渐 近 可 忽略 条 件 (3.2) 
成 立 ,那么 不 管 分 量 Xi,n 是 否 具有 相同 的 分 布 , 上 述 断 言 都 成 立 , 并 且 在 (3.1) 中 
可 以 把 等 号 换 为 极限 符号 : 无 穷 可 分 分 布 类 与 零 三 角形 阵列 的 行 和 的 极限 分 布 所 
成 的 类 重合 . 
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例 (hb) ”( 关 于 应 用 的 例子 ) 真 室 管 中 的 散 粒 效应 . 下 列 随机 过 程 的 变形 和 推广 出 现 
在 物理 学 和 通讯 工程 中 . 

我 们 打算 分 析 由 于 到 达 阴极 的 电子 的 数目 的 随机 起 伏 而 引起 的 电流 的 起 伏 . 假 
设 电子 的 到 达 构成 一 个 泊 松 过 程 , 一 个 到 达 的 电子 产生 一 个 电流 ,其 强度 在 z 个 
单位 时 间 以 后 为 I(z). 于 是 在 时 刻 t 的 电流 强度 在 形式 上 是 一 个 随机 变 基 

X(t) = D1 7), (3.3) 
k=1 
其 中 Ti 表示 在 t 之 前 到 达 的 电子 的 到 达 时 刻 . ( 换 句 话说 , 变量 t+ 一 他 ,TT 一 了 ,Ts 一 
Ts,… 是 相互 独立 的 , 且 有 共同 的 指数 分 布 . ) 

用 随机 过 程 的 方法 对 和 式 (3.3) 作 直接 分 析 是 不 难 的 ， 但 是 利用 三 角形 阵列 
分 析 和 式 (3.3) 这 种 较 繁 的 方法 有 助 于 直观 理解 ， 把 区 间 二 cov 分 成 端点 为 tk = 
t 一 Ah( 其 中 大 = 0,1,…) 的 小 子 区 间 . 由 泊 松 过 程 的 定义 , 区 间 球 ; 厂 -对 和 式 (3.3) 
的 贡献 相当 于 一 个 以 概率 1 - ah 取 值 0， 以 概率 ah 取 值 I(t 一 碌 ) 的 二 项 随机 变 
量 . 这 个 变量 的 期 望 为 ahI(kh), 方差 为 ah(1 一 ah)72(kh). 我 们 取 h= 1/Va, 作 一 
个 三 角形 阵列 ,其 中 Xn 是 区 间 二 ET 的 贡献 . 于 是 行 和 的 期 望 为 wh 并 (kj 
方差 为 ah(1 - ah) 于 72(kh). 如 果 级 数 (3.3) 有 意义 ,那么 行 和 的 分 布 应 趋 于 X(b) 
的 分 布 , 因此 我 们 应 当 有 


E(X(t))=@a / I(s)ds, Var(X(t))=a / 了 72(s)ds. (3.4) 


容易 用 三 角形 阵列 理论 来 验证 这 些 结论 . 我 们 称 关系 式 (3.4) 为 康 贝尔 (Campbell) 
定理 . 现在 看 来 它 并 不 高 深 , 但 是 它 是 在 1909 年 得 到 证 明 的 ,这 比 系统 的 理论 的 
出 现 要 早 几 十 年 . 在 系统 的 理论 出 现时 , 对 它 已 经 给 出 了 许多 出 色 的 证 明了 . (参阅 
8.10 节 中 的 习题 22 和 17.12 节 中 的 习题 5. ) 

例 (i) 占线 问题 上 例 的 变形 可 以 说 明 它 的 可 能 的 推广 类 型. 考虑 一 个 有 无 穷 多 
条 中 继 线 的 电话 局 . 打 往 电话 局 的 呼叫 形成 一 个 泊 松 过 程 ， 每 接 到 一 个 呼叫 就 把 它 
接 到 一 个 空闲 的 中 继 线 上 . 占用 时 间 有 共同 的 分 布 FP; 照例 假设 它们 与 呼叫 的 到 达 
过 程 独立 ,并且 相互 独立 . 在 时 刻 t 占线 的 数目 是 一 个 随机 变量 X(t), 其 分 布 可 以 
用 三 角形 阵列 的 方法 导出 . 像 在 上 例 中 那样, 我 们 把 0 分 成 n 个 长 度 为 h = t/n 
的 小 区 间 ， 并 用 Xk,n 表示 在 ni 一 kh 与 n 一 (k 一 1)h 之 间 开始 并 在 时 刻 t 继续 进 
行 着 的 会 话 的 次 数 . 当 n 很 大 时 , 变量 Xk,n 实际 上 只 取 值 0 和 1, 取 1 的 概率 为 
Qhll ~ F(kh)]. 于 是 Sn 的 期 望 是 这 些 概率 的 和 , 取 极 限 我 们 可 以 得 到 ,占线 的 数 
目的 期 望 为 


E(X()) =@ 人 “GPalds。 (3.5) 


158 第 6 章 一 些 重要 的 分 布 和 过 程 


注意 , 这 个 积分 等 于 占用 时 间 的 期 望 . 

关于 历史 的 注 “无穷 可 分 分 布 的 概念 可 追溯 到 B. de 非 内 蒂 (1929)， 科 尔 莫 戈 罗 夫 (1932) 
求 出 了 具有 有 限 方差 的 无 穷 可 分 分 布 的 传 里 叶 变换 ， 列 维 (1934) 求 出 了 一 般 的 无 穷 可 分 分 
布 的 傅 里 时 变换 ， 他 还 用 随机 过 程 的 观点 讨论 了 这 个 问题 , 所 有 后 来 的 研究 都 受到 了 他 的 
开创 性 工作 的 强烈 影响 ，1937 年 ， 费 蒜 和 辛 钦 独立 地 给 出 了 一 般 公式 的 纯 分 析 推 导 . 这 两 
个 作者 还 证 明了 , 零 阵列 的 极限 分 布 是 无 穷 可 分 的 


6.4 ”独立 增 量 过 程 


无 穷 可 分 分 布 与 独立 增 基 过 程 有 密切 的 联系 . 所 谓 独 立 增 量 过 程 ， 指 的 是 这 样 
一 个 依赖 于 连续 时 间 参 数 t 的 随机 变量 族 六 (tj， 使 得 对 任 一 有 限 集 合 tl < to < 
"<< tn， 增 量 义 (tk+1) 一 六 (tk) 是 相互 独立 的 . 在 这 个 时 候 ， 我 们 不 需 用 到 随机 过 
程 理论 ; 我 们 只 说 明 , 如 果 某 些 现象 可 以 用 概率 论 方法 描述 , 那么 理论 将 导致 无 穷 
可 分 分 布 . 在 这 种 意义 上 . 我 们 在 第 1 卷 17.1 节 和 3.8 节 例 (a) 中 考虑 了 特殊 的 独 
立 增 基 过 程 . 我 们 只 讨论 数值 变 基 X(t), 虽然 这 个 理论 可 以 搬 到 随机 向 量 上 去 . 

称 过 程 具有 平稳 增 量 , 如 果 X(s + 一 义 (s) 的 分 布 只 依赖 于 区 间 的 长 度 t 而 
不 依赖 于 s. 

我 们 用 n+ 1 个 等 距离 的 点 s=to <1 <…<th = s+t 来 划分 区 间 台 5 十 
并 设 Xkn = X(tk) 一 六 (tk-1). 具有 平稳 独立 增 域 的 过 程 的 变节 X(s 十 如 一 X(s) 是 
nn 个 独立 同 分 布 的 变 贡 Xk,n 之 和 ， 从 而 (8 十 t) 一 义 (s) 具 有 无 穷 可 分 分 布 , 我 们 
将 看 到 , 其 道 也 是 正确 的 . 事实 上 , 为 使 定义 在 上 > 0 上 的 单 参数 概率 分 布 族 Q, 可 
以 作为 一 个 具有 平稳 独立 增 基 的 过 程 中 的 X(s 十 t) 一 XX(s) 的 分 布 , 当 且 仅 当 


Qstt = QQ st>0. (4.1) 


一 个 满足 (4.1) 的 分 布 族 构成 一 个 半 群 ( 见 9.2 节 ). 每 个 无 穷 可 分 分 布 都 可 作为 这 
种 半 群 的 元 素 Qt( 其 中 上 > 0 是 任意 的 ). 

在 讨论 非 平稳 的 情形 以 前 , 我们 来 考虑 一 些 典型 例子 . 
例 (a) 复合 泊 松 过 程 . 对 于 任意 的 一 个 概率 分 布下 和 a > 0， 


人 一 > OO prx (4.2) 
一 0 
定义 一 个 复合 泊 松 分 布 . 容易 验证 ，(4.1) 成 立 . 现在 假设 Q: 表示 一 个 具有 平稳 独 
立 增 基 的 随机 过 程 中 的 X(b 一 六 (0) 的 分 布 . 当 下 集中 在 点 1 上 时 , 这 个 过 程 化 为 
通常 的 泊 松 过 程 ，(4.2) 化 为 


P{XG — X(0) =n} = ee (4.3) 
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一 般 的 模型 (4.2) 可 以 用 这 个 特殊 的 泊 松 过 程 解释 如 下 . 设 ,六 ,… 是 一 列 具 
有 共同 分 布 F 的 独立 变量 , 又 设 N(t) 是 一 个 满足 P{N(t) =n} =e ot(at)"/nl 的 
纯 泊 松 过 程 的 变量 , 而 且 与 Yi 独立 . 那么 (4.2) 表示 随机 和 十 … 十 Y(t) 的 分 布 . 
换 句 话 说 , 对 于 泊 松 过 程 的 第 n 次 跳跃 , 有 一 个 作用 丈 与 之 对 应 , X(t) 一 立 (0) 表 
示 发 生 在 5. 中 的 作用 之 和 . 在 2.7 节 中 研究 过 的 随机 化 了 的 随机 游 动 是 一 个 复合 
泊 松 过 程 , 其 中 丈 只 取 值 土 1. 经 验 上 的 应 用 将 在 本 节 的 末尾 举例 说 明 . 
例 (b) ”布朗 运动 或 维 纳 - 已 舍 利 耶 过 程 . 这 里 X(0) = 0 (过 程 从 原点 开始 ), 增 基 
X(t 十 8) 一 X(s) 服从 期 望 为 0, 方差 为 t 的 正 态 分 布 . 维 纳 和 列 维 证 明了 , 这 个 过 
程 的 样本 函数 是 以 概率 1 为 连续 的 ,在 所 有 的 无 穷 可 分 分 布 中 只 有 正 态 分布 具 有 
这 种 特性 . 
例 (c) ”稳定 过 程 . 对 于 严格 稳定 分 布 来 说 , 关系 式 (1.8) 只 是 重新 叙述 一 下 关系 
式 (4.1)( 其 中 Q(z) = R(r-Yez)). 因此 ， 这 个 分 布 定义 了 一 个 具有 平稳 独立 增 量 
的 过 程 的 转移 概率 ; 对 于 a = 2， 此 过 程 化 为 布朗 运动 . > 

这 个 理论 的 主要 定理 ( 见 第 9 章 和 第 17 章 ) 说 明 ，(4.1) 的 最 一 般 的 解 (从 而 
最 一 般 的 无 穷 可 分 分 布 ) 可 以 表示 为 某 一 列 适当 的 复合 泊 松 分 布 的 极限 . 由 于 例 (a) 
和 例 (b) 在 形式 上 差别 很 大 . 所 以 这 个 结果 是 出 人 意料 的 . 

即使 在 非 平稳 的 独立 增 荆 过 程 中 ，X(t + s) 一 X(t) 的 分 布 也 可 作为 三 角形 阵 
列 {Xin} 的 行 和 的 分 布 出 现 ,但 是 为 保证 (3.2) 成 立 ， 必 须 附 加 一 个 较 弱 的 连续 
性 条 件 . 例 (e) 将 说 明 这 种 必要 性 . 在 一 较 弱 的 限制 下 ， 只 有 无 穷 可 分 分 布 可 作为 
六 (t 十 5) 一 X(t) 的 分 布 出 现 . 
例 (d) 操作 时 间 . 时 间 尺 度 的 简单 变化 常常 可 以 把 一 般 的 过 程 化 为 比较 容易 处 
理 的 平稳 过 程 . 给 定 一 个 连续 的 增 函数 pw， 我 们 可 以 把 变量 X(t) 变换 成 Y(t) = 
羡 (p()). 显然 仍 具 有 独立 增 二 性 ,并 且 适 当选 择 p， 可 使 新 过 程 有 平稳 的 增 基 . 在 
实际 中 ,这 种 选择 通常 是 由 事物 的 本 质 所 决定 的 . 例如 , 在 电话 局 中 , 没有 人 会 把 
夜间 一 小 时 与 白天 的 忙碌 的 一 小 时 相 比较 ， 而 使 用 使 得 单位 时 间 内 的 平均 呼叫 次 
数 保持 不 变 的 可 变 时 间 单位 来 测 基 时 间 却 是 很 自然 的 . 此 外 , 在 不 断 增加 的 保险 业 
务 中 , 赔偿 要 求 加 速 地 发 生 , 但 是 这 种 不 平稳 性 可 以 通过 引入 一 个 测量 赔偿 要 求 的 
频率 的 操作 时 间 来 消除 掉 . 
例 (e) 经 验 上 的 应 用 . 很 多 的 实际 问题 可 以 化 为 复合 泊 松 过 程 . 这 里 有 几 个 典型 
的 例子 . (i) 由 于 汽车 事故 、 火 灾 、 雷电 等 引起 的 累积 损失 , 关于 对 集体 风险 理论 的 
应 用 , 见 6.5 节 例 (a). (ii) 一 条 专 捕 某 几 种 鱼 的 渔船 的 捕 鱼 量 (内 曼 (J. Neyman)). 
人) 由 降雨 量 和 用 户 的 需要 基 决 定 的 水 库 的 疼 水 量 (iv) 河 底 的 石头 是 这 样 长 时 间 
地 处 于 静止 ,以 致 于 它 的 逐次 位 移 实际 上 是 瞬时 的 . 在 时 间 区 间 而 内 的 总 位 移 可 
以 作为 一 个 复合 泊 松 过 程 来 处 理 . (首先 被 爱 因 斯 坦 (A. Einstein Jr. ) 和 G. 波 利 
亚 用 不 同 的 方法 讨论 过 ，)(v) 电 话 呼叫 ， 或 到 达 某 服务 机 构 的 顾客 . 在 适当 的 条 件 
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下 , 在 时 间 区 间 0,t 内 到 达 的 顾客 所 需要 的 总 服务 时 间 是 一 个 复合 泊 松 过 程 . 这 个 
过 程 的 显著 特点 是 : X(t) 的 值 在 时 刻 t 是 不 能 由 观察 得 到 的 ， 因 为 它 依赖 于 未 来 
的 服务 时 间 . (vi) 关于 因 碰 接 引 起 的 物理 质点 的 能 量变 化 . 见 10.1 节 例 (b). p 


*6.5 ”复合 泊 松 过 程 中 的 破产 问题 


设 X(t) 是 一 个 复合 泊 松 过 程 的 变量 , 即 在 长 度 为 上 的 时 间 区 间 上 的 增 量 和 (t 十 
引 一 X(s) 服从 (4.2) 的 概率 分 布 Q.. 设 c > 0 和 z > 0 是 固定 的 . 所 谓 破产 指 的 是 
事件 


{X(t) > z+ cet}. (5.1) 


我 们 把 c 看 作 一 个 常数 , 把 z > 0 看 作 一 个 自由 参数 ,用 R(z) 表示 “破产 恒 不 产 
生 ” 的 概率 . 我 们 将 从 形式 上 证 明 ， 如 果 问 题 有 意义 ,那么 R(z) 应 当 是 泛 函 方程 
(5.2) 的 非 增 解 . 首先 给 出 几 个 例子 来 说 明 可 以 应 用 我 们 的 问题 的 种 种 实际 情形 , 
例 (a) ”集体 风险 理论 .Q 这 里 X( 表示 在 时 间 区 间 BE 内 保险 公司 收 到 的 赔偿 要 
求 的 总 数 . 假设 赔偿 要 求 的 出 现 服从 一 个 泊 松 过 程 ， 各 个 赔偿 要 求 都 服从 分 布 F. 
从 原则 上 讲 , 这 些 赔偿 要 求 可 以 是 正 的 或 负 的 . (例如 , 死亡 可 以 使 保险 公司 免 付 倘 
务 , 增加 储 金 . ) 在 实际 中 , 发 展 中 的 保险 公司 将 以 与 总 收入 的 保险 费 成 比例 的 操 
作 时 间 来 测 其 时 间 ( 见 6.4 节 例 (d)). 于 是 可 以 假设 , 在 不 出 现 赔偿 要 求 时 , 储 金 以 
男 有 的 速度 增加 . 如果 z 表示 在 时 刻 0 的 初始 储 金 , 那么 公司 在 时 刻 上 的 总 储 金 
由 随机 变 基 z+ ct 一 X(t) 表示 , 储 金 为 负 即 破产 . 

例 (b) 大 型 设备 . 一 个 理想 中 的 水 库 由 河水 和 雨水 以 固定 的 速度 c 供水 . 在 随机 
的 时 间 区 间 中 , 水 库 的 放水 基 为 X1,X2,…. 可 以 应 用 复合 泊 松 模型 并且 如 果 z 
表示 在 时 刻 0 的 初始 蓄 水 量 , 那么 只 要 在 时 刻 t 以 前 不 发 生 破产 , z+ ct 一 X(t) 就 
表示 在 时 刻 上 时 的 车 水 量 . 关于 有 关 问 题 的 大 基文 献 ， 见 本 书 末 尾 所 列 的 专著 . 

例 (c) ”病人 诊 病 的 时 刻 表 .@ 我 们 约定 把 医生 给 他 的 病人 看 病 的 时 间 看 作 是 服务 
期 望 为 w- 的 指数 分 布 的 独立 随机 变量 只 要 治疗 不 间断 地 继续 下 去 , 已 被 治疗 的 
病人 的 离开 服从 普通 的 泊 松 过 程 . 设 X(b) 表示 在 时 间 区 间 下 内 离开 的 人 数 . 设 在 

* 本 节 讨论 - -个 特殊 的 课业 它 有 很 大 的 实用 价值 , 但 在 本 书 除了 几 个 用 新 方法 处 理 它 的 例子 外 , 没 
有 用 到 它 . 

@@ 有 很 多 文献 讨论 过 这 个 〈 由 卢布 德 格 〈(F. Lundberg) 开 创 的 ) 理论 . 关于 比较 近代 的 研究 ， 见 五 . 
Cramér, On some guestions connected with mathematical risk Univ. Calif. Publications in 
Statistics, vol. 2, no. 5(1954) pp. 99-125. 在 11.7 节 例 (a) 和 12.5 节 例 (d) 中 用 初等 方法 得 
到 了 克拉 美 浙 近 估计 (克拉 美 是 用 高 深 的 维 纳 - 替 普 夫 (Wiener-Hopf) 方法 得 到 的 ). 

@® R. Pyke, The supremum and infimum of the Poisson process, Ann. Math. Statist., vol. 
30(1959) pp.568-576。 毕 克 (Pyke) 仅 讨论 了 纯 泊 松 过 程 , 但 得 到 了 更 精确 的 结果 (用 不 同 的 方 
法 ). 
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时 刻 0( 开 始 办 公 时 ) 有 z 个 病人 在 等 待 , 以 后 , 新 的 病人 在 时 刻 c ,2c ,3c ，… 
到 来 . 只 要 X(t) < z 十 ct, 医生 就 不 会 空闲 . 

下 面 的 形式 论证 导致 一 个 确定 输 光 概率 已 的 方程 . 假设 样本 函数 的 第 一 次 
跃 发 生 在 时 刻 ,并 且 跳 跃 度 为 z. 因为 破产 恒 不 发 生 , 所 以 一 定 有 = < z 十 cr, 并 
且 对 于 所 有 的 上 > r, 增 量 X(Gb 一 z < z 一 z+ct. 这 个 增 量 与 过 去 独立 ,因此 后 一 
事件 的 概率 为 R(z 一 + cr). 对 所 有 可 能 的 7 和 z 求 和 , 得 


R(z)= | ”aererdr / R(z+cr — z)F{dz}. (5.2) 

这 就 是 所 求 的 方程 , 但 可 以 把 它 化 简 . 利用 变量 代 换 s = z 十 cr, 可 得 
RD = 人 / ee/oce-ads 人 R(s — z)P{dz}. (5.3) 

因此 , RR 是 可 微 的 , 通过 一 个 简单 的 微分 可 得 最 后 的 积分 - 微分 方程 
F(z) = SR(z) 一 人 人 机 R(z ~ z)F{dz}. (5.4) 


注意 ,由 定义 知 ,， 当 s < 0 时 ，R(s) = 0, 因此 右边 的 积分 是 卷 积 F 太 RR. 我 们 将 在 
6.9 节 例 (d)、11.7 节 例 (a) 和 12.5 节 例 (d) 中 再 来 讨论 (5.4). 


6.6 更 新 过 程 


更 新 理论 的 基本 概念 已 经 在 第 1 卷 第 13 章 中 讨论 循环 事件 时 引入 了 . 我 们 将 
会 看 到 , 连续 时 间 参 数 的 引入 依赖 于 记号 的 改变 ， 而 不 是 依赖 于 概念 的 改变 . 循环 
事件 的 显著 特点 是 , 逐次 等 待 时 间 Ti 是 具有 共同 分 布 F 的 独立 随机 变 基 ; 第 nn 次 
出 现 的 时 刻 由 下 列 和 式 给 出 : 


Sn 一 全 十 … 十 Th. (6.1) 


根据 约定 , So = 0, 把 0 看 作 是 第 0 次 出 现 . 

即使 在 依赖 于 连续 时 间 参 数 的 随机 过 程 中 , 也 经 常 可 以 看 到 形 如 (6.1) 的 时 刻 
的 序列 . 在 这 种 情形 下 ,可 以 用 简单 的 方法 得 到 非常 深刻 的 结果 . 从 分 析 上 讲 , 我 
们 只 涉及 到 独立 正 变量 的 和 ,引入 术语 “更 新 过 程 ” 的 唯一 理由 是 在 讨论 其 他 过 程 
时 它 经 常 出 现 以 及 下 面 的 不 言 而 喻 的 含义 : 我 们 用 到 了 更 新 方程 这 个 强 有 力 的 工 
具 9， 

@ 关于 循环 事件 的 更 复杂 的 一 般 化 , 见 J. F. C. Kingman, The stochastic theory of regenerative 

events, Zeitschrift Wahrscheinlich-keitstheorie, vol.2 (1964) pp. 180-224. 
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定义 1 称 随 机 变量 序列 {Sn} 构成 一 个 更 新 过 程 ， 如果 它 具有 形式 (6.1), 其 中 
Ti 是 独立 同 分 布 的 随机 变量 , 它们 的 共同 分 布 已 满足 @F(0) = 0. 

由 于 变量 是 正 的 , 所 以 即使 积分 发 散 也 所 以 记 .= E(T;)( 在 发 散 的 情形 下 , p= 
co). 我 们 称 期 望 4 为 平均 搞 环 时 间 , 与 在 类 似 的 情况 下 一 样 , 是 变量 Ti 出 现在 基 
个 随机 过 程 中 ,还 是 序列 {Z} 本 身 确定 我 们 的 概率 空间 , 对 目前 的 讨论 没有 影响 . 

在 大 多 数 (但 不 是 所 有 的 ) 应 用 中 ,可 以 把 力 解释 为 “等 待 时 间 ", 那么 就 可 称 
5 为 更 新 (或 再 生 ) 时 刻 . 

直观 上 似乎 很 明显 ， 对 于 一 个 固定 的 有 限 区 间 7 = 'a,8 属于 的 更 新 时 刻 
5 的 个 数 是 以 概率 1 为 有 限 的 ,从 而 是 一 个 完全 确定 的 随机 变 其 N. 如 果 称 事件 
{Sn e 中 为 “成 功 ,那么 是 在 无 穷 多 次 试验 中 成 功 的 总 次 数 , 它 的 期 望 等 于 


U{I}= ps, el}= b> F"*{T}. (6.2) 


n=0 n=0 


为 了 研究 这 个 测度 , 我 们 照例 引入 它 的 分 布 函 数 


U(z) = DF™*(z). (6.3) 
n=0 
不 用 说 , 当 z < 0 时 , U(z) = 0, 但 是 U 在 原点 上 有 一 个 质量 为 1 的 原子 . 
在 第 1 卷 第 13 章 中 研究 过 的 离散 情形 中 ,测度 U 集中 在 整数 上 : wr 表示 有 
一 个 Sn 等 于 大 的 概率 . 因为 这 个 事件 只 能 发 生 一 次 ,所 以 也 可 以 把 wk 解释 为 使 
jn = 大 的 对 的 平均 个 数 . 在 目前 的 情形 下 , 应 当 把 UV{ 了 解释 为 期 望 而 不 应 当 解 释 
为 概率 , 因为 事件 {Sn e 7} 可 以 对 许多 nn 发 生 . 
必须 证 明 U(z) < oo. 由 集中 在 ,06 上 的 分 布 的 卷 积 的 定义 , 显然 有 Fw(z) < 
Fm(z), 因此 在 几何 学 上 , (6.3) 中 的 级 数 至 少 在 使 F(z) < 1 的 每 一 点 上 收敛 . 还 有 
分 布 集中 在 一 个 有 限 区间 上 的 情形 , 但 是 这 时 存在 一 个 整数 7, 使 得 F"*(z) < 1. 
满足 n=7,2r,37,… 的 各 项 组 成 一 个 收敛 子 级 数 , 这 蕴含 (6.3) 中 的 整个 级 数 的 收 
敛 性 , 因为 它 的 各 项 单调 地 依赖 于 n. 
与 在 离散 情形 一 样 ,更 新 测度 和 下 列 更 新 方程 有 密切 的 联系 : 


Z=z 十 友 Z. (6.4) 
具体 写 出 来 就 是 
Z(z) = z(z)+ 人 Zz- 切 Ftdyj，z> 0， (6.5) 


@ 在 原点 有 一 个 质量 为 p < 1 的 原子 不 会 有 多 大 影响 
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其 中 积分 区 间 是 闭 的 . 实际 上 , 可 以 把 积分 限 换 为 -oo 和 co, 只 要 我 们 假设 当 z < 0 
时 , z(z) = Z(z) = 0. 我 们 将 遵循 这 个 约定 . 

关于 更 新 方程 的 一 个 基本 事实 包含 在 下 列 定理 1 中 . 
定理 1 如 果 z 是 有 界 的 , 且 当 z<0 时 , z= 二 0, 那么 由 


2Z(z) = 人 z(z — YU{dy} (6.6) 


定义 的 卷 积 Z = U 碎 z 是 更 新 方程 (6.5) 的 一 个 解 . 不 存在 其 他 的 在 一 00,0 上 等 于 
零 且 在 有 限 区 间 上 有 界 的 解 . 
证 我 们 已 经 知道 , 定义 U 的 级 数 (6.3) 对 所 有 的 z 都 收敛 . 取 它 与 z 的 卷 积 , 可 
以 看 出 , 2 在 有 限 区 间 上 有 界 且 满足 更 新 方程 . 两 个 这 样 的 解 之 差 满足 Y = FV， 
从 而 对 所 有 的 n 也 满足 V = Fn" 大妈. Te 对 于 所 有 的 mr, F"*(z) 一 0， WE 
果 V 是 有 界 的 , 那么 对 于 所 有 的 z,V(z) = 

我 们 将 在 11.1 和 那里 我 们 将 研究 UU 和 2 的 源 二 入 
质 . (关于 更 新 方程 的 一 般 形式 , 见 6.10 节 . ) 

应 当 指 出 , U 本 身 满足 


U(z) =1+ 人 “Uz WF{ay}, 2>0, (6.7) 
0 


此 式 是 更 新 方程 在 z = 1 时 的 特殊 情形 . 这 可 以 通过 一 个 通常 称 为 “更 新 论证 ”的 
常用 的 概率 论证 直接 看 出 . 因为 我 们 把 0 当做 一 个 更 新 时 刻 ， 所 以 闭 区 间 0,z 中 
的 更 新 时 刻 的 平均 数目 等 于 1 加 上 半 开 区 间 0,z 中 的 更 新 时 刻 的 平均 数目 ， 只 有 
当 多 < z 时 ,此 区 间 才 包含 更 新 时 刻 ; 给 定 Ti = y < z, 在 0,3 中 的 更 新 时 刻 的 
平均 数目 等 于 U(z 一 y). 对 y 求 和 就 得 到 (6.7). 

更 新 过 程 的 两 个 简单 推广 是 有 用 的 . 首先 , 与 瞬时 循环 事件 类 似 , 我 们 可 以 容 
许 有 亏损 分 布 . 那么 , 气量 9 = 1 - F(co) 可 以 解释 为 终止 概率 . 抽象 地 说 , 我 们 用 
一 个 被 称 为 “死亡 ”的 点 f 来 扩大 实 直 线 , Ti 或 是 正 数 , 或 是 2. 为 了 引用 方便 ， 
我 们 引入 非 正式 的 : 
定义 29 除了 太 是 亏损 的 以 外 ,可 终止 的 或 险 时 的 更 新 过 程 是 普通 的 更 新 过 程 . 
我 们 把 孝 量 9 二 1 一 FF(co) 解释 为 终止 概率 . 

为 了 一 致 起 见 , 我们 把 0 当做 第 0 次 更 新 时 刻 . 过 程 在 第 n 次 更 新 时 刻 还 没 
有 终止 的 概率 等 于 (1 一 gq)". 当 n 一 oo 时 , 它 趋 于 0. 因此 ， 可 终止 过 程 以 概率 
1 在 有 限时 间 内 终止 ，F"x 的 总 质量 是 (1 - g)"， 因 而 更 新 时 刻 的 平均 数目 等 于 
U(eo) = gq7? < oo. 这 可 以 说 成 是 过 程 达到 的 代数 的 平均 数目 .“5n < z 且 过 程 在 这 
个 第 个 更 新 时 刻 终止 ” 的 概率 是 9F"*(z). 因此 , 我 们 有 

@ 举例 说 明 见 6.7 节 例 (f), 关于 推广 见习 题 和 
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定理 2 在 一 个 可 终止 更 新 过 程 中 , gU 是 过 程 的 持续 时 间 (终止 时 的 寿命 ) 的 正常 
概率 分 布 . 

第 2 个 推广 相应 于 延迟 了 的 循环 事件 ,是 在 于 允许 初始 的 等 待 时 间 有 一 个 不 
同 的 分 布 . 在 这 种 情形 下 , 我 们 从 j = 0 开始 给 Ti 编号 , 因此 现在 有 So = To 六 0. 
定义 3 。 称 序列 50,51,… 构成 一 个 延迟 了 的 更 新 过 程 ， 如 果 它 具有 形式 (6.1)， 
其 中 Ti 是 相互 独立 的 严格 正 (正常 求 考 损 变量 ,Ti,Ty,…( 但 不 包括 Tb) 是 同 分 布 
的 ). 


6.7 例 与 问题 


像 自 更 新 机 组 、 计数 器 及 人 口 增长 等 例子 , 可 以 明显 的 方式 从 离散 情形 中 搬 过 
来 . 然而 ,一 个 特殊 的 问题 将 导致 一 些 我 们 将 在 以 后 讨论 的 有 趣 的 问题 . 
例 (a) ”检验 的 悖 论 . 在 自 更 新 机 组 理论 中 , 一 部 设备 , 例如 一 节 电 池 , 装置 好 以 
后 一 直 工 作 , 直到 它 坏 掉 为 止 . 损坏 后 ， 它 立即 被 同样 的 电池 代替 ， 这 个 过 程 不 间 
断 地 继续 下 去 . 更 新 时 刻 构成 一 个 更 新 过 程 , 其 中 Ti 是 第 上 个 电池 的 寿命 . 

现在 假设 通过 检验 来 测定 实际 寿命 : 我 们 取 一 个 在 时 刻 t > 0 工作 着 的 电池 样 
本 并 观察 它们 的 寿命 . 因为 F 是 所 有 的 电池 的 寿命 的 共同 分 布 . 所 以 我 们 可 以 希望 
这 也 适用 于 被 检验 的 样本 . 但 是 事实 并 非 如 此 . 事实 上 ， 对 于 指数 分 布 ,情况 只 
在 字句 上 与 1.4 节 中 的 等 待 时 间 悖 论 有 所 不 同 . 在 1.4 节 中 , 被 检验 的 对 象 的 寿命 
有 一 个 完全 不 同 的 分 布 . 对 象 在 时 刻 被 检验 这 个 事实 ,改变 了 它 的 奉命 的 分 布 ， 
并 使 其 期 望 奉 命 加 倍 . 我 们 在 11.4 节 (4.6) 中 将 会 看 到 , 这 种 情况 在 所 有 的 更 新 过 
程 中 具有 上 典型 性 . 实际 的 含义 是 非常 重要 的 . 我 们 看 到 ,无 偏见 的 检验 计划 可 能 得 
到 错误 的 结论 ,因为 我 们 实际 观察 的 对 象 未 必 在 总 体 中 具有 典型 性 . 曾经 注意 到 的 
这 种 现象 是 容易 理解 的 ( 见 1.4 节 ), 但 是 它 揭露 了 可 能 易 犯 的 错误 以 及 理论 与 实际 
之 间 的 必然 的 相互 作用 . 附带 说 明 , 如果 我 们 决定 检验 在 时 刻 t 后 装置 的 第 一 个 对 
象 , 那么 就 不 会 出 现 麻烦 . > 

现在 是 引入 更 新 理论 中 的 3 个 有 趣 的 随机 变量 的 好 时 机 . 在 上 例 中 , 所 有 3 个 
变量 都 涉及 在 时 刻 上 工作 着 的 电池 ， 且 可 以 用 不 言 自明 的 术语 来 描述 ， 剩余 寿命 ， 
已 度 过 的 寿命 和 总 寿命 . 正式 的 定义 如 下 . 

对 于 给 定 的 上 > 0， 有 唯一 的 一 个 (随机 的 ) 的 下 标 NV, 使 得 Sw <t < Sn. 
那么 

(a) 剩余 的 等 待 时 间 是 Sw:+: 一 t， 即 从 + 上 到 下 一 次 更 新 时 刻 的 时 间 . 

(b) 已 度 过 的 等 待 时 间 是 t 一 SN,， 即 在 最 后 一 个 更 新 时 刻 以 后 所 经 过 的 时 间 . 

(©) 它们 的 和 Sv,4, 一 Sw, = Tws4, 是 包含 时 刻 t 的 循环 区 间 的 长 度 
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这 种 术语 不 是 唯一 的 , 可 以 随 上 下 文 而 改变 . 例如 ,在 随机 游 动 中 ,可 以 称 我 
们 的 剩余 等 待 时 间 为 区 间 五 cs 的 首 入 点 或 首 中 点 . 在 上 例 中 ,我们 用 寿命 一 词 表 
示 等 待 时 间 . 我 们 将 在 11.4 节 和 14.3 节 中 研究 这 3 个 变量 . 

我 们 把 泊 松 过 程 定义 为 一 个 循环 时 间 7; 服从 同一 指数 分 布 的 更 新 过 程 . 在 计 
多 服务 员 和 计数 器 问题 中 ,自然 要 假设 , 要 到 来 的 业务 形成 一 个 泊 松 过 程 . 在 某 些 
其 他 过 程 中 , 到 达 时 刻 的 间隔 是 一 个 常数 . 为 了 把 这 两 种 情形 结合 起 来 ,在 排队 论 
中 通常 引入 具有 任意 的 到 达 时 刻 间隔 的 一 般 更 新 过 程 .9 

我 们 着 手 讨论 与 更 新 过 程 有 关 的 相当 一 般 的 问题 . 我 们 仍 用 FF 来 表示 过 程 的 
基本 分 布 . 

我 们 从 所 谓 的 “大 间隔 的 等 待 时 间 W” 开 始 . 这 里 , 一 个 循环 时 间 为 T 的 更 
新 过 程 ， 在 第 一 次 出 现 一 个 不 包含 更 新 时 刻 的 长 度 为 上 的 时 间 区 间 时 停止 ,到 此 
过 程 就 终止 了 . 我 们 来 对 等 待 时 间 W 的 分 布 V 推导 一 个 更 新 方程 . 由 于 W 必然 大 
于 &, 所 以 当 t<& 时, V(t) = 0. 对 于 t>&, 考虑 两 种 互 斥 的 可 能 性 : TI > & 或 
T=y < &. 在 第 1 种 情形 下 , 等 待 时 间 W 等 于 €. 在 第 2 种 情形 下 , 过 程 重新 开 
始 , {W 和 甘 在 给 定 Ti =y 下 的 条 件 概率 是 V(t 一 y). 对 所 有 可 能 性 求 和 , 得 


十 
VW) =1- F(O)+ / Vt)r{dy)}, t>é€ (7) 


当然 , 当 t<& 时 , V(t) = 0. 这 个 方程 可 化 为 标准 更 新 方程 


V=z+GxV, (7.2) 
其 中 亏损 分 布 G 由 下 式 定义 : 
F(z), <&, 
CG(z) = { 人 SR (7.3) 
F(é), rz>6, 
且 
0， T<é, 
z(7) = { (7.4) 
1—F(€), z>é€. 


最 重要 的 特殊 情形 是 满足 F(t) = 1 一 er-e 的 泊 松 过 程 中 的 间隔 , 其 解 V 与 1.9 
节 的 覆盖 定理 有 关 . [见习 题 15 和 14.2 节 例 (a), 关于 一 种 不 同 的 处 理 方法 见习 题 
16.] 


外 这 个 一 般 性 有 点 令 人 误解 ,因为 除了 不 按时 刻 表 沿 环行 公路 行驶 的 汽车 外 ,很 难 找到 实际 例子 . 对 
这 个 一 般 性 的 误解 是 由 事实 非 泊 松 输入 通常 也 是 非 马 尔 可 夫 输 入 引起 的 
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经 验 上 的 应 用 的 例子 
例 (b) 。 横 穿 一 个 交通 流 .9 汽车 在 一 条 单 向 行车 道上 以 固定 的 速度 行驶 , 逐次 的 
通过 形成 一 个 泊 松 过 程 (或 其 他 更 新 过 程 ) 的 一 个 样本 . 走 到 路 边 的 行人 (或 到 达 一 
个 路 口 的 汽车 ) 一 看 到 以 后 & 秒 钟 ( 即 穿 过 行车 道 所 需要 的 时 间 ) 内 没有 汽车 通过 
时 ， 他 就 开始 横 穿行 车 道 . 用 W 表示 为 实现 一 次 穿 过 所 需要 的 时 间 ， 即 在 路 边 的 
等 待 时 间 加 上 6. W 的 分 布 V 满足 (7.1), 其 中 F(b) = 1 一 ere. 聊 在 11.7 节 例 (b) 
和 14.2 节 例 (a) 中 继续 讨论 . ] 
例 (c) 本 型 盖 苹 (Geiger) 计数器. 到 达 的 质点 构成 一 个 泊 松 过 程 , 每 个 到 达 的 质 
点 (不 管 是 否 被 记录 ) 都 要 把 计数 器 关闭 一 段 固定 的 时 间 《. 若 一 个 质点 被 记录 , 则 
计数 器 将 保持 关闭 的 状态 ,直到 出 现 一 个 不 包含 新 的 到 达 的 长 度 为 上 的 区 间 时 为 
止 . 我 们 的 理论 适用 于 关闭 期 的 长 度 的 分 布 V. ( 见 第 1 卷 13.11 节 习 题 14.) 
例 (d) ”最 大 的 观察 循环 时 间 . 在 一 个 基本 的 更 新 过 程 中 , 用 2 表示 时 刻 上 以 前 9 出 
现 的 T; 的 最 大 值 . 为 使 事件 {Zt < &} 发 生 ,， 当 且 仅 当 直到 时 刻 t, 不 出 现 一 个 不 包 
会 更 新 时 刻 的 长 度 为 & 的 时 间 区 间 , 因而 用 我 们 的 记号 有 : P{2 > 6} =V(t). > 

出 现在 应 用 中 的 许多 更 新 过 程 可 以 描述 为 交替 过 程 或 二 阶段 过 程 ， 我 们 可 以 
根据 上 下 文 , 称 这 两 个 阶段 为 主动 的 或 被 动 的 , 自由 的 或 关闭 的 、 兴 奋 的 或 正常 的 . 
主动 周期 和 被 动 周期 相互 交替 ; 它们 的 持续 时 间 是 独立 的 随机 变量 , 主动 周期 的 持 
续 时 间 服 从 一 个 共同 的 分 布 ,被 动 周期 的 持续 时 间 也 服从 一 个 共同 的 分 布 . 
例 (e) ”由 故障 引起 的 推迟 . 最 简单 的 例子 是 由 一 部 每 次 故障 都 引起 一 次 推迟 的 
设备 的 实际 更 换 给 出 的 . (推迟 可 以 解释 为 发 现 或 修理 的 时 间 .) 逐次 的 工作 时 间 
,Tz,… 与 逐次 的 停工 时 间 玖 , 鸡 ，… 相互 交替 , 我 们 得 到 一 个 循环 时 间 为 二 六 
的 正常 更 新 过 程 . 这 一 个 过 程 也 可 以 看 成 是 在 Tl 上 出 现 第 一 个 更 新 时 刻 , 循环 时 
间 为 七 十 Ti+1 的 延迟 了 的 更 新 过 程 . 
例 (f) 失去 的 呼叫 . 考虑 这 样 一 条 中 继 线 , 使 打 来 的 呼叫 形成 一 个 到 达 时 刻 间 隔 
的 分 布 为 G(t) = 1 一 e-% 的 泊 松 过 程 ,而 所 有 的 会 话 持续 时 间 是 具有 共同 分 布 书 
的 独立 随机 变量 ， 中 继 线 或 者 是 空闲 的 或 者 被 占用 ， 在 占线 期 间 到 来 的 呼叫 就 失 
去 了 , 并 且 对 此 过 程 没有 影响 . 这 样 得 到 了 一 个 二 阶段 过 程 , 其 循环 时 间 的 分 布 为 
下 妇 G. (见习 题 17 及 14.10 节 中 的 习题 3 和 习题 4.) 
例 (g) 先 为 最 后 到 者 服务 . 有 时 交替 等 待 时 间 的 分 布 不 是 预先 知道 的 , 应 当 根据 
其 他 的 数据 计算 . 作为 一 个 例子 ,我们 考虑 一 部 数据 处 理 机 , 其 中 新 信息 的 到 来 形 
成 一 个 泊 松 过 程 , 因而 闲 期 服从 指数 分 布 . 处 理 在 任何 时 刻 到 来 的 新 信息 所 需要 的 
。。。 @ 关于 过 去 的 文献 和 它 的 【用 不 同方 法 讨论 的 ) 变形 , 见 ] C. Tanner, The delag to pedestrains 

crossing a road, Biometrika, vol. 38(1951) pp. 383-392. 


@ 更 确切 地 说 , 如 果 n 是 使 S54-1 < t < Sn 的 (随机 ) 指标 , 那么 Zt = max[,… ,Tn-1,. 兰 
珀 蒂 (A. Lamperti) 系 统 地 研究 了 具有 这 种 性 质 的 变量 . 
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时 间 都 服从 一 个 概率 分 布 G- 

忙 期 和 闲 期 相互 交替 , 但 是 忙 期 的 长 度 依赖 于 对 忙 期 中 到 来 的 信息 的 处 理 方 
式 . 在 某 些 情况 下 ,只 关心 最 后 的 信息 ,于 是 新 到 来 的 信息 立即 被 处 理 , 而 所 有 以 
前 的 信息 都 被 抛弃 了 . 忙 期 的 长 度 的 分 布 V 应 由 更 新 方程 来 计算 (见习 题 18). 
例 (h) 盖 革 计数 器 . 在 I 型 计数 器 中 , 每 次 记录 后 有 一 个 固定 长 度 为 《 的 关闭 
期 , 在 关闭 期 内 到 来 的 质点 没有 作用 . 这 个 过 程 与 例 (e) 中 所 述 的 过 程 一 样 , Ty 服 
从 指数 分 布 , Y; 等 于 &. 在 工 型 计数 器 中 , 未 被 记录 的 质点 的 到 达 也 使 计数 器 关闭 ， 
除了 Y; 的 分 布依 束 于 基本 的 过 程 且 应 当 根 据 更 新 方程 (7.1) 来 计算 外 [ 例 (o)], 情 


况 是 一 样 的 . p 
6.8 随机 游 动 
设 XI,X2,… 是 具有 共同 分 布 F 的 独立 随机 变量 , 并 且 照 例 令 
S50=0,， Sn = Xi++ Xn. (8.1) 


我 们 称 Sn 是 一 个 作 一 般 随机 游 动 的 质点 在 时 刻 n 的 位 置 . 我 们 并 没有 引入 新 的 理 
论 性 的 概念 ,9 只 是 为 了 得 到 过 程 {Sn} 的 一 个 简单 直观 的 描述 ， 引 入 了 一 个 术语 . 
例如 ,如 果 工 是 任 一 区 间 (或 其 他 的 集合 ), 那么 称 事件 {Sn e 了} 为 在 工 中 的 一 次 
去 留 , 通过 对 给 定 区 间 了 中 的 逐次 逗留 的 研究 ,可 以 揭露 出 51, 52,… 的 起 伏 的 重 
要 特征 . 我 们 将 把 指标 n 解释 为 时 间 参 数 , 将 谈 及 “时 刻 n”. 在 本 节 中 , 我 们 将 用 
逐次 的 记录 值 来 描述 随机 游 动 的 一 些 惊 人 特征 . 这 些 结果 的 用 处 将 用 6.9 节 中 的 应 
用 来 说 明 , 另 一 种 (独立 的 ) 处 理 方法 将 在 6.10 节 中 给 出 . 

媒人 更 新 过 程 

称 记录 值 发 生 在 时 刻 n > 0, 如 果 


Sn > 85;, j=0,1,.,n—1. (8.2) 


对 于 一 个 给 定 的 样本 轨道 这样 的 指标 也 许 不 存在 ， 如 果 它们 确实 存在 ， 那么 它 
们 形成 一 个 有 限 或 无 限 有 序 序列 . 因此 ,我 们 可 以 说 (8.2) 第 1 次 发 生 , 第 2 次 发 
生 ，…… - 它们 的 时 刻 仍 是 随机 变量 ， 但 可 能 是 气 损 的 . 有 了 这 些 准备 工作 以 后 ， 
我 们 现在 就 可 以 引入 一 些 重要 的 随机 变量 , 许多 有 关 随 机 游 动 的 讨论 将 以 这 些 变 
量 为 基础 . 
定义 ”第 上 个 (上升) 阶梯 指标 是 (8.2) 式 第 上 次 发 生 的 时 剂 . 第 天 个 阶梯 高 度 是 Sn 
在 第 让 个 阶梯 时 剂 的 值 . (两 个 随机 变量 者 可 能 是 亏损 的 . ) 

@ 我 们 在 第 1 卷 中 曾 考虑 过 无 穷 随机 游 动 的 样本 空间 ,但 在 那里 我 们 必须 通过 明显 的 极限 过 程 来 说 

明 像 “ 物 光 概率 " 这样 的 概念 的 合理 性 . 现在 由 测度 论 知 这 些 明显 的 取 极限 是 合理 的 . ( 见 4.6 节 .) 
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把 (8.2) 式 中 的 不 等 号 改变 方向 ,可 用 同样 的 方式 来 定义 下 降 阶 梯 变 量 . @ 
术语 上 升 是 多 余 的 ， 只 是 为 了 强调 或 清楚 起 见 才 使 用 的 
在 样本 轨道 (So, 51,…) 的 图 像 中 , 阶梯 点 作为 图 像 达到 空前 的 高 度 (记录 值 ) 


的 点 出 现 . 图 6-1 表示 一 个 趋向 -co 的 随机 游 动 {54}， 它 的 最 后 一 个 正 项 是 在 
n = 31 处 . 5 个 上 升 阶梯 点 和 18 个 下 降 阶梯 点 分 别 用 。 和 。 表示. 关于 一 个 带 有 
柯 西 变量 的 随机 游 动 见 图 6-2. 


图 6-1 ”随机 游 动 及 与 其 相关 的 排队 过 程 . 随机 游 动 {Sn"} 的 变量 Xvw 的 期 望 为 -1, 方差 


为 16. 上 升 阶梯 点 和 下 降 阶梯 点 分 别 用 。 和 。 表示 . 第 7 个 阶梯 点 是 (26,16), 它 
大 概 是 整个 随机 游 动 的 最 大 值 . 

字母 w 表示 随机 游 动 在 那里 第 2 次 或 第 3 次 取 记录 值 ; 这 些 是 通过 把 (8.2) 
中 的 严格 不 等 号 换 为 > 所 定义 的 弱 阶 梯 点 . ] 

在 整个 图 形 中 ，S" 大 于 它 的 期 望 -n. 事实 上 , n = 135 是 使 S" < -mn( 即 
S135 = 一 137) 的 第 1 个 指标 . 这 与 这 种 n 的 期 望 等 于 无 穷 大 这 个 事实 一 致 . 

变量 Xn 具有 形式 Xn = 多 。-- sn, 其 中 变量 多, 和 of 是 相互 独立 的 , 且 
分 别 是 在 1, 3, 5, 7, 9 和 2, 4, 6, 8, 10 上 均匀 分 布 的 . 在 6.9 节 例 (a) 中 , 如 果 
假设 到 达 时 刻 间 隔 以 相同 的 概率 取 值 2, 4, 6, 8, 10 ,而 服务 时 间 为 1, 3, 5, 7, 9 
的 概率 都 是 让 则 变量 W 是 第 n 个 顾客 的 总 等 待 时 间 ，X 的 分 布 对 点 士 2k 一 1 
赋予 概率 (5 一 k)/25, 其 中 大 = 0,， 1, 2, 3, 4. 


例 (a) ”在 “普通 的 ”的 随机 游 动 中 ,，F 有 质量 为 p 和 9 的 原子 1 和 -1， 如 果 
4 > p, 则 上 升 阶梯 变量 是 亏损 的 , 亏 量 是 p/g[ 见 第 1 卷 11.3 节 (3.9)]. 第 大 个 阶梯 
高 度 必然 等 于 有. 由 于 这 个 原因 , 第 1 卷 只 讨论 阶梯 时 刻 . 第 个 阶梯 指标 是 第 一 


@ 把 严格 不 等 号 换 为 > 和 <, 可 得 到 弱 阶 梯 指 标 . 当 基本 分 布 是 连续 的 时 候 ， 这 个 令 人 讨厌 的 区 别 
是 不 必要 的 . 在 图 6-1 中 , 弱 阶 梯 点 用 字母 表示 - 
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次 在 点 上 逗留 的 时 刻 . 它 的 分 布 已 在 第 1 卷 11.4 节 (d) 中 求 出 了 ; 在 p= 3 的 特殊 
情形 的 分 布 , 已 在 第 1 卷 3.4 节 的 定理 2 中 求 出 了 . 

第 1 个 阶梯 指标 及 是 第 一 次 进入 下 co 的 时 刻 , 第 1 个 阶梯 高 度 .6 等 于 Sz. 
时 刻 及 以 后 的 随机 游 动 是 整个 随机 游 动 的 概率 仿 样 . 给 定 到 = m, 在 时 刻 大 > mm 
上 出 现 的 第 2 个 阶梯 指标 a 仅 依赖 于 Xn+1,…, Xk. 因此 , 第 1 个 阶梯 指标 与 第 2 
个 阶梯 指标 之 间 的 试验 次 数 是 一 个 随机 变量 色 , 色 与 到 独立 且 与 及 同 分 布 . 由 
此 可 见 , 更 一 般 地 ， 第 天 个 阶梯 指标 和 第 大 个 阶梯 高 度 可 以 写成 形式 


页 + 十 胞 ， 汉 二 十 次 


其 中 久 和 必 是 相互 独立 的 随机 变量 ,分别 与 页 和 . 铬 有 相同 的 分 布 . 换 句 话 
说 , 阶梯 指标 和 阶梯 高 度 都 构成 (可 能 是 可 终止 的 ) 更 新 过 程 . 

对 于 可 终止 过 程 , 5 趋向 -oo 这 件 事 在 直 观 上 是 很 明显 的 ，S" 以 概率 1 达到 
一 个 有 限 的 极 大 值 . 下 节 将 说 明 , 阶梯 变量 为 分 析 一 类 颇 有 实际 价值 的 过 程 提供 了 
强 有 力 的 工具 . 
例 (b) ”明显 的 表达 式 . 设 尺 有 一 个 由 下 式 定义 的 密度 


f(z)= (8.3) 
zr>0. 


这 个 随机 游 动 有 一 个 少见 的 特点 , 即 所 有 有 关 的 分 布 都 可 以 明显 地 计算 出 来 . 它 在 
排队 论 中 有 很 重要 的 意义 , 因为 /是 两 个 分 别 集中 在 页 cs 和 一 c6,0 上 的 指数 密度 
的 卷 积 . 这 表示 X 可 以 写成 两 个 服从 指数 分 布 的 正 随机 变量 之 差 Xi = 98; 一 0) 
不 失 一 般 性 , 我 们 假设 a < 5b. 

上 升 阶梯 高 度 . 冯 有 一 个 密度 ae-”; 这 个 变量 是 亏损 的 ， 它 的 亏 量 等 于 (b 一 
a)/b. 上 升 阶梯 时 刻 的 母 函 数 为 0-1p(s), 其 中 


2p(s) = a+b— V(a+b)? — 4abs. (8.4) 


亏 量 也 是 (b 一 a)/b. 

下 降 阶梯 高 度 G4 有 一 个 密度 ae**(z > 0), 下 降 阶 梯 时 刻 的 母 函 数 为 ao-1p(9). 
在 a=b 的 特殊 情形 , 它 化 成 1 一 Vi 一 s, 这 个 母 函 数 是 在 普通 的 随机 游 动 或 掷 硬 
币 ) 中 所 熟悉 的 . | 关于 证 明和 其 他 结果 ，, 见 12.4 节 、12.5 节 和 18.3 节 . 又 见 6.4 节 
例 (e).] 
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6.9 排队 过 程 


研究 各 种 与 服务 员 、 仓 库 设备 、 等 待 时 间 等 有 关 的 问题 的 文献 ?特别 多 . 统一 
化 工作 已 取得 了 很 大 进展 , 但 是 许多 小 的 变化 遮盖 了 人 们 的 视野 , 以 致 于 只 见 树木 
不 见 林 . 新 的 一 般 方法 的 力量 仍 被 低估 . 我 们 从 以 递 推 方式 正式 引入 一 个 随机 过 程 
开始 , 这 种 方式 乍 看 起 来 有 点 不 自然 . 例子 将 说 明 这 种 方式 的 广泛 应 用 性 ; 我 们 以 
后 将 会 看 到 , 可 以 用 非常 简单 的 方法 得 出 深刻 的 结果 . ( 见 12.5 节 . ) 
定义 1 设 XI,X2,… 是 具有 共同 (正常 ) 分 布 玉 的 相互 独立 的 随机 变量 导出 的 
排队 过 程 是 用 下 列 递 推 方式 定义 的 随机 变量 序列 Wo, Wi，,… : Wo = 0， 


(9.1) 
0, Wn + Xnt+1 < 0. 


Wn = { Wnt+Xntl Wn+Xnti>0, 

简单 地 说 ,Wn+1 = (Wn 十 Xn+1) U0. 
举例 说 明 见 图 6-1. 

例 (a) ”一 个 服务 员 的 排队 . 假设 “顾客 ”到达 一 个 “服务 员 ” 那 里 . 到 达 形 成 一 个 
到 达 时 刻 间隔 2 为 oh4, .44,… 的 正常 更 新 过 程 (到 达 的 时 刻 是 0, of of + 00，…， 
我 们 把 顾客 编 上 号 0, 1, 2, …). 对 于 第 n 个 顾客 ， 有 一 个 相应 的 服务 时 间 络 , ,我 
们 假设 多 " 与 到 达 时 刻 独立 ， 并且 是 独立 同 分 布 的 : 服务 员 或 者 “ 闲 着 ”或 者 “ 忙 
着 ”, 他 在 开始 时 刻 0 是 闲 着 的 . 以 后 遵守 下 列 规则 . 如 果 顾 客 在 服务 员 闲 着 的 时 候 
到 达 , 那么 服务 员 立 即 为 他 服务 . 否则 , 他 就 加 入 等 待 队 列 (排队 )， 服 务 员 按 到 达 
的 次 序 9 不 间断 地 为 顾客 服务 ,一 直到 队列 消失 ,服务 员 变 成 空闲 时 为 止 , 所谓 队 
长 指 的 是 现 有 顾客 (包括 正 被 服务 的 顾客 ) 的 数目 . 第 n 个 顾客 的 等 待 时 间 W 是 


@ 关于 参考 书 ， 可 参阅 书 末 参 考 文献 中 所 列 的 专著 ， 要 简单 地 概述 这 个 课题 的 发 展 ， 并 给 出 适当 的 
评价 是 非常 困难 的 . 许多 对 新 方法 的 发 展 有 贡献 的 文章 由 于 它们 所 导致 的 进展 耐 变 得 过 时 了 . [排队 
论 中 的 林 德 莱 (Lindley) 积 分 方程 (1952) 就 是 一 个 例子 . ] 另 一 些 文章 则 由 于 它们 讨论 (有 时 是 很 
复杂 的 ) 特殊 的 问题 而 值得 注意 ,但 是 在 概述 一 般 的 理论 时 就 没有 它们 的 地 位 了 . 总 的 说 来 ， 关 于 
这 几 个 课题 的 大 量 文献 都 强调 了 例子 和 各 种 变形 ， 但 没有 注意 到 一 般 的 方法 ， 由 于 重复 很 多 ， 所 
以 很 难说 哪个 在 前 ,哪个 在 后 。[ 例 如 ,在 Stockholm 的 一 篇 论文 中 (1939) 把 某 一 积分 方程 的 解 
归功 于 费 勒 的 未 发 表 的 讲稿 (1934). 但 这 个 解 现在 以 好 几 个 人 的 名 字 命 名 .] 关于 历史 可 见 肯 达尔 
(Kendall) 的 两 籍 有 独立 意义 的 综述 性 论文 Some problems in the theory of queues and Some 
problems in the theory of dams, J. Roy. Statist. Soc. Series B, vol. 13(1951) pp.151-185 
and vol. 19(1957) pp. 207-233. 

@ 通常 ,到达 时 刻 问 隔 是 一 个 常数 或 服从 指数 分 布 , 但 现在 流行 的 是 允许 任意 的 更 新 过 程 ; 见 6.7 节肢 
注 1. 

@ 这 个 “排队 的 规律 ” 完全 与 队长 、 忙 期 长 度 和 类 似 的 问题 无 关 . 只 有 顾客 本 人 能 感觉 到 这 些 规律 的 
作用 , 其 中 “ 先 为 第 1 个 到 达 者 服务 "、“ 先 为 最 后 1 个 到 达 者 服务 ”和 “随机 选择 ”是 极端 措施 . 如 
果 允 许 离开 , 那么 整个 情况 就 改变 了 . 
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从 他 到 达 时 刻 到 他 的 服务 开始 的 时 刻 所 用 的 时 间 ; 顾客 在 服务 员 那 里 所 用 的 总 时 
间 是 Wn + 多 (例如 , 如 果 最 初 几 个 服务 时 间 是 4, 4, 1, 3,…, 到 达 时 刻 的 间隔 
为 2, 3, 2, 3, …, 那么 编号 为 1, 2, … 的 顾客 加 入 了 队长 分 别 为 1, 1, 2, 1, … 的 
队列 , 且 等 待 时 间 为 2, 3, 2, 2, …. ) 

为 了 避免 像 “ 一 个 顾客 在 另 一 个 顾客 离开 的 时 刻 到 达 ” 这 样 的 意义 不 明确 的 
话 , 我 们 将 假设 变量 4, 和 多 的 分 布 4 和 B 都 是 连续 的 . 于 是 在 任 一 时 刻 的 队 
长 都 是 完全 确定 的 . 

我 们 着 手 设 计 一 个 用 递 推 方式 计算 等 待 时 间 Wa 的 方案 . 根据 定义 , 编号 为 0 
的 顾客 在 时 刻 0 到 达 闲 着 的 服务 员 那 里 , 因而 等 待 时 间 是 Wn = 0. 现在 假设 第 ?个 
顾客 在 时 刻 t 到 达 , 且 知 道 他 的 等 待 时 间 W. 他 的 服务 时 间 从 时 刻 t+ Wn 开始 , 在 
时 刻 t+Wn 十 Bn 终止 . 下 一 个 顾客 的 到 达 时 刻 是 t+ ct4+1 如 果 Wn 十 Bn < thn+1， 
那么 他 看 到 服务 员 是 闲 着 的 ， 并 且 如 果 Wn + 多 。- fn+1 > 0, 那么 他 的 等 待 时 间 
为 Wn = Wn + 多 n 一 2Arn+1. 换 句 话 说 , 等 待 时 间 序 列 {Wn} 与 下 列 独立 随机 变量 


Kn = Bn-i— Hn, n=1,2,.…, (9.2) 


导出 的 排 过 过 程 重合 . 

例 (b) 存储 设备 与 存货 . 为 了 使 描述 直观 起 见 ， 我 们 利用 水 库 ( 和 水 坝 ), 但 是 这 
个 模型 同样 也 适用 于 其 他 的 存储 设备 或 存货 . 蓄 水 量 取 决 于 输入 和 输出 . 输入 是 由 
河水 和 雨水 供给 的 , 输出 由 需要 量 所 控制 , 但 是 只 有 当 水 库 不 空 的 时 候 才 能 满足 这 
个 要 求 . 

现在 考虑 在 选 定 时 刻 0,mi,m，…… 的 蓄 水 量 ?0, Wi, TV2，… 用 Xn 表示 而 -元 
中 实际 的 供应 量 与 理论 (理想 ) 的 需要 量 之 差 ， 又 设 所 有 的 变化 都 是 瞬时 的 旦 集中 
在 时 刻 1,72,… 上 . 我 们 从 时 刻 0 的 Wo = 0 开始 . 一 般 说 来 ,除非 需要 量 超过 车 
水 量 ， 否 则 Hpn+i 一 Wn 应 等 于 Xn+1. 因此 ,Wa 应当 满足 (9.1), 所 以 只 要 理论 上 
的 净 变 化 量 Xk 是 独立 同 分 布 的 随机 变量 , 则 逐次 的 疼 水 量 服从 由 {Xk} 导出 的 排 
队 过 程 . 

对 于 数学 家 (车 不 是 对 于 用 户 ) 来 说 , 问题 是 要 找 出 使 Xi 为 独立 同 分 布 的 
变量 的 条 件 , 并 求 出 下 的 可 能 形式 . 通常 ,Tk 是 等 距离 的 , 或 者 是 泊 松 过 程 的 一 个 
样本 , 但 是 目前 只 要 假设 六 形成 一 个 到 达 时 刻 间隔 为 oi, .064,… 的 更 新 过 程 就 够 
了 . 最 常用 的 模型 可 以 分 成 下 列 两 种 类 型 . 

0) 输入 是 以 固定 的 速度 c 进行 的 , 需要 量 多, 是 任意 的 . 那么 Xn = ch- Bn. 
我 们 应 假设 这 个 X， 与 “过 去 ”Xi,… ,Xn-1 独立 . (ct 和 名 独立 这 个 通常 的 假设 
是 不 必要 的 : 我 们 没有 理由 说 需要 量 多 和 持续 时 间 多, 无 关 . ) 


@ 为 简单 起 见 , 我 们 从 空 水 库 开始 . 调整 到 任意 的 初始 条 件 都 不 会 产生 困难 [ 见 例 (c)]. 
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人 区 输出 是 以 固定 的 速度 进行 的 , 输入 是 任意 的 . 把 4 和 多 的 作用 交换 一 
下 , 叙述 是 相同 的 . 
例 (c) ”往返 列车 的 排队 .9 每 过 1 小 时 有 一 列 有 r 个 乘客 座位 的 往返 列车 从 车 站 
开 出 . 要 乘 车 的 人 在 车 站 上 排队 等 待 . 每 次 出 发 时 ,队列 中 的 前 + 个 人 上 车 , 其余 
的 留 在 等 待 队列 中 . 我 们 假设 , 在 列车 逐次 开 出 之 间 到 来 的 乘客 数目 是 独立 同 分 布 
的 随机 变量 cf, .244,…. 设 Wn 是 第 n 次 开 出 后 等 待 队 列 中 的 乘客 数目 , 且 为 了 简 
单 起 见 , 设 Wo = 0, 于 是 , 如 果 Wn 十 or+1 一 7 为 正 , 则 Wnt1 = Wn 十 n+1 一 TT 
如 果 Wn + +l 一 7 不 是 正 的 , 则 Wn+1 = 0. 因此 ,Wn 是 由 变量 为 Xn = oz 一 7 
的 随机 游 动产 生 的 排队 过 程 (9.1) 的 变量 . p 

我 们 现在 用 变量 Xi 产生 的 随机 游 动 来 描述 排队 过 程 {Wn}. 与 在 6.8 节 中 一 
样 , 令 50 = 0, 5 = Xi 十 … 十 Xn, 并 沿用 关于 阶梯 变量 的 记号 . 为 了 便于 描述 , 我 
们 利用 适合 于 例 (a) 中 的 服务 员 的 术语 . 

我 们 定义 v 为 这 样 的 下 标 , 使 得 51 > 0, S52 > 0,…, Su-1 > 0, 但 5, < 0. 在 这 
种 情形 下 , 编号 为 1,2,…,v 一 1 的 顾客 的 等 待 时 间 为 Wi = 51,…,W,-1 = 9v-1， 
编号 为 v 的 顾客 第 一 个 看 到 服务 员 是 闲 着 的 (第 1 个 幸运 的 顾客 ). 从 他 到 达 的 时 
刻 开 始 , 这 个 过 程 作为 整个 过 程 的 复制 , 重新 开始 . v 只 不 过 是 第 1 个 负 和 数 的 指 
标 , 即 v 是 第 1 个 下 降 阶 梯 指 标 , 我 们 将 始终 如 一 地 用 到 ”来 表示 它 . 因此 , 我 们 
得 到 第 1 个 结论 : 下 降 阶 梯 指 标 对 应 于 看 到 空闲 服务 员 的 幸运 顾客 . 换 句 话说 , 幸 
运 顾客 到 来 的 时 刻 构成 一 个 具有 与 页 同 分 布 的 循环 时 间 的 更 新 过 程 . 

在 实际 的 情形 中 , 变量 邹 ” 应 不 是 气 损 的 ， 因 为 它 的 气量 等 于 顾客 永远 看 不 
到 空闲 服务 员 的 概率 ， 并 且 以 概率 1 有 一 个 后 面 跟 无 究 队 列 的 顾客 . 事实 上 ， 当 
E( 多 k) < E( cf) 时 ， 久 ”是 正常 的 . 

现在 设 编号 为 v 一 1 的 顾客 在 时 刻 r 到 达 . 他 的 等 待 时 间 是 W,-1 = 3,-1. 从 
而 他 离开 的 时 刻 是 7 十 Ws-1 + 多 ,-1. 当 服务 员 空闲 了 


WW — Wu-il-B-1=-S,-1- Xv=-5, 


个 单位 时 间 后 ,第 1 个 幸运 的 顾客 (编号 为 v) 在 时 刻 7 + 好, 到 达 . 但 是 根据 定 
义 , Su 是 第 1 个 下 降 阶梯 高 度 . 冶 ， 当 过 程 重新 开始 时 , 我 们 得 到 第 2 个 结论 : 闲 
期 的 持续 时 间 是 与 一 (下 降 阶梯 高 度 的 循环 时 间 ) 同 分 布 的 独立 随机 变量 . 换 句 
话说 , 编号 为 到 十 … 十 驴 - 的 顾客 是 第 > 个 看 到 空闲 服务 员 的 顾客 . 在 他 到 达 的 
时 刻 , 服务 员 已 空 闪 了 一 加 个 单位 时 间 . 


® P. E. Boudreau, J. S. Griffin Jr. and Mark Kac, An clementary gueuing problem, Amer. 
Math. Monthly, vol. 69(1962) pp. 713-724. 这 篇 文章 是 为 不 具有 本 学 科 知 识 的 外 行人 写 的 . 虽 
然 使 用 的 令 述 方式 不 同 , 但 其 计算 已 包含 在 12.4 节 例 (c) 中 了 . 
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很 清楚 , 在 逐次 的 阶梯 时 刻 之 间 , 排队 过 程 {Wn} 的 图 形 的 各 部 分 和 随机 游 动 
的 图 形 的 相应 部 分 全 等 ， 但 是 排队 过 程 是 向 上 伸展 的 ， 因 而 从 时 间 轴 的 点 上 开始 
(图 6-1). 为 了 用 分 析 的 方法 描述 这 一 点 , 我 们 用 [n] 表示 最 后 一 个 小 于 或 等 于 n 的 
下 降 阶 梯 指 标 ; 换 名 话说, [n] 是 这 样 一 个 ( 随机 ) 指标 , 使 得 m] < n, 且 


Sin < 5;, j=0,1,.,n. (9.3) 
这 就 以 概率 1 唯一 地 确定 了 四 ]( 因 为 Xi 的 分 布 是 连续 的 ). 显然 ， 
Wn = Sn — Sin]: (9.4) 


如 果 我 们 以 相反 的 次 序 考察 变量 X1,…,X，, 那么 上 述 关系 式 将 导致 一 个 很 重 
要 的 结论 . 为 了 简略 起 见 , 令 X{ = Xn,…,Xn = X1. 这 些 变量 的 部 分 和 是 


Sh=Xi+.+Xh= Sn — Sn-k, 


(9.4) 说 明 序列 0, S1,…, 5 的 最 大 项 的 下 标 是 n 一 [n]， 且 最 大 项 等 于 Wn. 但 是 
(Xf,…,X《%) 的 分 布 与 (X1,…, Xn) 的 分 布 相同 . 因此 , 我 们 有 下 列 基本 定理 . 
定理 了 排队 变量 Wn 的 分 布 和 基本 随机 游 动 {Xk} 中 的 随机 变量 


Mn = maxl0, S51,..…, Sn) (9.5) 


的 分 布 相同 . 

我 们 将 在 第 12 章 中 讨论 这 个 定理 的 推论 . 这 里 我 们 来 说 明 ，, 利用 它 可 以 把 某 
些 破 光 问 题 化 为 排队 过 程 , 尽管 它们 的 外 表 不 同 . 
例 (d) 破产 问题 . 在 6.5 节 中 , 我们 把 破产 定义 为 “有 一 个 t, 使 得 X(t) > z 十 ct 
这 一 事件 ,其 中 X(b 是 一 个 分 布 为 (4.2) 的 复合 泊 松 过 程 的 变量 . 用 m,m，…… 表 
示 这 个 过 程 的 逐次 跳跃 的 时 刻 . 既然 破产 发 生 ， 那 么 它 在 某 个 时 刻 六 也 发 生 ， 因 
此 只 要 考虑 “有 一 个 n, 使 得 Sn = X(m) - crn > z” 的 概率 就 行 了 . 但 是 根据 复 
合 泊 松 过 程 的 定义 , X(7n) 是 n 个 具有 共同 分 布 F 的 独立 随机 变量 Yi 之 和 ， 而 
Tm 是 nn 个 独立 的 服从 指数 分 布 的 变量 et 之 和 . 因此 , 我 们 实际 上 讨论 的 是 由 变量 
Xk = Yi 一 coh 产生 的 随机 游 动 ，Xx 的 概率 密度 由 下 列 卷 积 给 出 ， 

e [ ole-W/ep{dy)}. (9.6) 
破产 发 生 ， 当 且 仅 当 在 此 随机 游 动 中 ,事件 {Sn > z} 对 某 个 n 发 生 . 因此 求 破产 
概率 相当 于 在 有 关 的 排队 过 程 中 求 变量 Wi 的 分 布 . 

@ 此 定理 是 波 拉 泽 克 (F. Pollaczek) 在 1952 年 首次 明显 提出 的 , 斯 皮 策 尔 (F. Spitzer) 在 下 列 论文 


中 用 不 同 的 方法 讨论 了 它 ，The Wiener-Hopf equation whose kernel is a probability density, 
Duke Math. J, vol. 24(1957) pp. 327-344. 关于 Spitzer 的 证 明 , 见习 题 21. 
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例 (e) ”数值 实例 当 到 达 时 肇 间隔 和 服务 时 间 分 别 服 从 期 望 为 1/a 和 1/ 以 其 中 
a < 5) 的 指数 分 布 时 ,我 们 就 得 到 了 最 重要 的 排队 过 程 . 根据 6.8 节 例 (b) 中 描述 
的 这 种 过 程 的 特征 , 可 以 断言 , 第 ne 个 地 客 的 等待 时 间 有 二 个 招供 分 布 到, 此 分 
es aas 1 一 a/b 的 原子 ， 并 且 对 z > 0 有 害 度 。 二 4ae-(0-o)e. 期 望 等 

Ti 可 计数 器 的 闲 期 和 第 1 个 下 | 降 阶 樟 高 度 有 相同 的 密度 ， 即 oe-“. 在 这 种 


情形 下 ， 闲 期 和 到 达 时 刻 间隔 有 相同 的 分 布 (但 在 其 他 的 排队 过 程 中 , 情况 不 是 这 
样 ). 
第 1 个 发 现 计 数 器 是 空闲 的 顾客 的 号 码 N 的 母 函 数 为 p(s)/a, 其 中 p 由 (8.4) 
所 定义 . 现在 考虑 从 时 刻 0 开始 的 忙 期 , 即 到 服务 员 第 一 次 变 为 空闲 的 时 刻 的 时 间 
间隔 . 这 个 周期 从 号 码 为 0 的 顾客 开始 , 随机 变量 NN 又 等 于 初始 忙 期 中 顾客 的 数 
目 . 由 简单 的 计算 可 知 , 它 的 期 望 等 于 b/(b 一 a), 它 的 方差 等 于 abla +)/(b 一 a)3. 
最 后 , 令 T 是 忙 期 的 持续 时 间 . 它 的 密度 由 14.6 节 (6.16) 显 式 给 出 ， 其 中 
cp = a,cg = b. 这 个 涉及 到 贝 塞 尔 函数 的 公式 不 利于 计算 , 但 是 可 利用 14.4 节 例 
(a) 和 14.6 节 例 (b) 中 的 用 不 同方 法 导出 的 它 的 拉 普 拉 斯 变换 来 计算 的 矩 . 结果 
是 
E(T) = 全 了 Var(T) = + 页 
在 排队 过 程 中 , 忙 期 和 闲 期 相互 交替 , 它们 的 期 望 分 别 是 1/( 一 a) 和 1/a. 因 


此 , (6 一 a)/a 是 服务 员 的 空间 时 间 的 一 种 量度 . 更 确切 地 说 , 如 果 U(t) 是 直到 时 刻 
t 的 空闲 时 间 ,那么 二 1E(U(#)) 一 (b 一 a)/a. 


表 6-1 

b=1 
a=05 a=06 a=07 a=08 a=09 a=0.95 
等 待 时 间 期 望 1 1.5 2.3 4 9 19 
(稳定 状态 ) ” 方 差 3 5.3 10 24 99 399 
忙 期 期 望 2 2.5 3.3 5 10 399 
方差 12 25 63 255 1900 16 000 
每 个 忙 期 期 望 2 2.5 3.3 5d 10 399 
的 顾客 数目 方 差 6 15 44 200 1700 15 200 


表 中 取 平 均 服 务 时 间 为 单位 ， 因 此 a 表示 在 一 个 服务 时 间 内 到 达 的 顾客 的 期 
望 数目 . 这 个 表 还 说 明 忙 期 的 方差 很 大 . 因此 ， 忙 期 的 起 伏 很 大 是 自然 的 . 我 们 看 
出 , 在 实际 应 用 中 , 通常 的 对 期 望 的 依赖 是 很 危险 的 . 对 于 一 个 方差 为 255 的 忙 期 ， 
期 望 为 5 这 个 事实 没有 什么 实际 意义 . 
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上 述 排队 过 程 的 多 维 类 似 物 更 复杂 . 基 弗 (J. Kieferj 和 华 尔 夫 维 欧 (JWol- 
fowitz) 葛 定 了 它 的 理论 基础 [On the theory of gueues with many servers, Trans. 
Amer. Math. Soc, vol. 78(1955) pp. 1-18]. 


6.10 ” 常 返 的 和 瞬时 的 随机 游 动 


我 们 来 对 随机 游 动 进行 分 类 , 这 种 分 类 与 6.8 节 无 关 , 而 与 6.6 节 的 更 新 理论 
有 密切 的 联系 , 给 定 直 线 上 的 一 个 分 布 函 数 下 , 我 们 在 形式 上 引入 由 下 式 定义 的 区 
何 函 数 : a 

U{1} = > Fex{7}. (10.1) 
k=0 
这 个 级 数 与 (6.2) 中 的 级 数 一 样 , 但 是 当 FF 不 集中 在 半 直 线 上 时 , 即使 是 有 限 区 
间 , 此 级 数 也 可 能 发 散 . 我 们 将 证 明 , (10.1) 的 收敛 或 发 散 具 有 深刻 的 意义 . 基本 的 
事实 是 简单 的 ,但 由 于 必须 特殊 对 待 算术 分 布 9， 所 以 用 公式 表达 比较 困难 . 

为 了 简略 起 见 , 令 不 表示 区 间 -hh < z < h, In +t 表示 区 间 t 一 hz < t+h. 
定理 1 (i) 如 果 下 是 非 算术 的 ,那么 或 者 对 于 每 个 有 穷 区 间 都 有 U{T} < oo， 或 
者 对 于 所 有 的 区 间 都 有 U{I} = oo. 

(站 如 果 已 是 一 个 步 长 为 和 的 算术 分 布 ， 那 么 或 者 对 于 每 个 有 穷 区 间 都 有 
UI{1} < oo, 或 者 对 于 包含 形 如 mA 的 点 的 每 个 区 间 都 有 U{I} = oo. 

( 诞 ) 如 果 U{In} < o0, 那么 对 于 所 有 的 t 和 hh > 0， 

U{In +t} < U{Tan}. (10.2) 

为 了 易于 引用 这 两 种 情形 , 我 们 引入 定义 (在 定义 中 , 下 得 到 了 一 个 应 属于 相 
应 的 随机 游 动 的 形容 词 ). 
定义 称 媚 是 皮 时 的 ,如果 对 于 所 有 的 有 穷 区 间 有 U{JT} < oo, 否则 称 下 是 常 返 
的 . 

除了 它 的 概率 意义 外 , 此 定理 还 和 下 列 积分 方程 有 关 ; 
2 = z 十 玉女 2 (10.3) 


此 方程 与 更 新 方程 (6.4) 类 似 , 我 们 以 这 个 积分 方程 为 起 点 , 来 证 明定 理 1 和 
定理 2 设 z 是 连续 的 , 并 且 对 于 |z| < 有 hh,0<z(z) < jio, 在 也 外 z(z) =0. 如 果 
玉 是 脐 时 的 , 那么 
+o0 
z=/ 2 WU{ay) (10.4) 


@ 称 下 是 算术 的 , 如 果 它 的 增 点 都 在 形 如 0, 士 X 士 2X,… 的 点 上 . 具有 这 种 性 质 的 最 大 的 入 称 为 亚 
的 步 长 . ( 见 5.2 节 .) 
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是 (10.3) 的 一 个 一 致 连续 解 ， 且 
0 < 2Z(7) < po U{I2n}. (10.5) 
Z 在 也 中 的 一 点 上 达到 最 大 值 . 了 
这 两 个 定理 的 证 明 (i) 设 对 于 某 一 a > 0, U{Io} < co, 选取 < 50, 令 z 在 I 
外 等 于 零 , 但 不 恒 等 于 零 . 我 们 将 用 逐次 通 近 法 来 解 (10.3), 令 2o = z, 递 推 地 令 
Za) = z(z) 十 / 人 Fan 0G0.6) 
对 于 由 下 式 定义 的 Un， 
Un(T) = Fox{T} 十 … 十 Fnw{T]， (10.7) 
显然 有 
十 oo 
z= ze -Wntay), (10.8) 
(积分 区 域 实际 上 是 一 个 长 度 < 2h 的 区 间 ). 这 样 定义 的 函数 2" 是 连续 的 ,我 们 
用 归纳 法 来 证 明 ， 它 在 满足 z(én) > 0 的 点 名 上 达到 最 大 值 yn， 对 于 Zo = z， 
这 显然 是 正确 的 . 如 果 它 对 Zn-: 是 正确 的 , 那么 由 (10.6) 式 可 见 ，z(z) = 0 蕴含 
Zr(z) 和 pn-1, 而 jn > Zn(én-1) > Zn-i(én-1) = pn-1: 
由 此 推出 , 区 间 I + 包含 在 Ra 中 , 从 而 由 (10.8) 式 有 
Hn < po U{T2n}, (10.9) 
这 就 证 明了 函数 Zn 是 一 致 有 界 的 . 因为 Zo < Z1 < …, 所 以 Zr 一 Z, 其 中 2 满 
足 (10.5) 
根据 单调 收敛 性 ， 由 (10.6) 式 和 (10.8) 式 推 出 , 极限 2 满足 积分 方程 (10.3)， 
且 具 有 (10.4) 式 的 形式 . 由 (10.9) 式 可 知 , 不 等 式 (10.5) 成 立 . 上 界 仅 依赖 于 z 的 最 
大 值 jo, 我 们 可 以 对 I 的 一 个 真子 区 间 五 内 的 所 有 点 >, 能 够 自由 地 令 z(z) = jo 
在 这 种 情形 下 , 我 们 由 (10.8) 式 可 得 
Zr(z) > JoUn{ 万 十 二- (10.10) 
这 个 不 等 式 对 所 有 的 nm < h 都 成 立 , 因而 对 于 7 = 有 hh 也 成 立 (因为 不 是 闭 的 ), 把 上 
述 最 后 两 个 不 等 式 联合 起 来 就 证 明了 (10.2) 的 正确 性 . 这 蕴含 , 对 于 长 度 < 的 区 
间 , U{I} < oo. 但 是 每 个 有 穷 区 间 都 可 以 分 成 有 限 多 个 长 度 < h 的 区 间 ， 因此 对 
于 所 有 有 穷 的 I,U{I} < oo. 最 后 由 (10.4) 式 求 差 数 可 知 ， 


IZ(z +6)— 2(2)| < U{I2n}: suplz(z + 6) — z(z)|. 
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因此 , 2 是 一 致 连续 的 , 关于 瞬时 分 布 FF 的 所 有 断言 都 得 到 了 证 明 . 

(i) 还 有 一 种 情形 : 对 于 每 个 a > 0, U{Ia} = oo. 那么 (10.10) 表明 ,对 于 一 
个 包含 原点 的 邻 域内 的 所 有 的 z, Zn(z) 一 o0. 如 果 t 是 下 的 增 点 , 那么 由 (10.6) 
式 推出 ， 对 于 一 个 包含 t 的 邻 域内 的 所 有 的 z, Zn(z) 一 co， 根据 归纳 法 ， 这 对 
于 F2*，F3*，,… 的 每 个 增 点 也 同样 是 正确 的 . 假设 FF 是 一 非 算术 分 布 如 果 下 
集中 在 一 条 射线 上 ， 那 么 我 们 有 U{I4} < oo(6.6 节 ). 因此 ,根据 5.4 节 的 引 理 
2, 2 太 ，F3 太 ,.… 的 增 点 在 直线 上 是 稠密 的 , 从 而 处 处 有 Zn(z) 一 00. 这 蕴含 对 于 所 
有 的 区 间 , Un {1} 一 co. 作 明显 的 修改 后 , 这 个 论证 也 适用 于 算术 分 布 ,因而 定理 
得 证 . 
在 第 11 章 中 ,我们 将 回 过 头 来 讨论 更 新 方程 (10.3), 但 现在 我 们 来 讨论 定理 
1 对 随机 游 动 的 含义 ， 设 X1,X2,… 是 具有 共同 分 布 F 的 独立 随机 变量 ， 并 令 

n = Xi 十 … 十 Xn， 所 谓 “ 随 机 游 动 在 时 刻 n = 1,2,… 逗留 在 1 上 ”， 指 的 是 
Sn ET 这 一 事件 . 
定理 3? 如 果 已 是 朋 时 的 ， 那 么 随机 游 动 在 区 间 T 上 的 运 留 的 次 数 是 以 概率 1 
为 有 限 的 ， 并 且 这 种 运 留 的 平均 次 数 等 于 U{ 了 T}. 

如 果 下 是 常 返 的 且 是 非 算术 的 ， 那么 随机 游 动 在 每 个 区 间 工 上 运 留 的 次 数 以 
概率 1 为 无 穷 . 如 果 F 是 常 返 的 且 是 算术 的 , 且 步 长 为 和 ,那么 随机 游 动 在 每 个 点 
mA 上 运 留 的 次 数 以 概率 1 为 oo. 

证 假设 下 是 瞬时 的 . 随机 游 动 在 时 刻 n 后 到 达 了 的 概率 不 大 于 (10.1) 中 的 级 数 
的 第 n 个 余部 . 因此 , 对 于 充分 大 的 mn， 随机 游 动 在 工 上 的 逗留 次 数 大 于 n 的 概率 
< 6. 这 就 证 明了 第 1 个 断言 . 

现在 假设 是 常 返 的 且 是 非 算术 的 . 用 pa(t) 表示 随机 游 动 到 达 I +t 的 概率 . 
只 要 对 所 有 的 h > 0 和 所 有 的 t 证 明 pn = 1 就 够 了 ,因为 这 显然 蕴含 随机 游 动 在 
每 个 区 间 上 的 逗留 次 数 必然 为 任意 数 . 

在 着 手 证 明之 前 , 我 们 注意 , 如 果 Sn = z, 我 们 可 以 把 z 取 为 新 原点 ， 从 而 知 
道 随机 游 动 在 此 以 后 在 I 上 逗留 的 概率 等 于 pn( 一 zx). 特别 , 如 果 z 是 五 二 t 中 的 
一 个 点 , 那么 随机 游 动 在 此 以 后 在 工 上 逗留 的 概率 < p2n(-t). 

我 们 首先 证 明 ph(0) = 1. 对 于 任意 固定 的 h > 0, 用 pr 表示 随机 游 动 在 I 上 
的 逗留 次 数 至 少 为 7 的 概率 . 那么 pi + ps + … 是 随机 游 动 在 ,上 的 逗留 次 数 的 
期 望 ,从 而 由 常 返 性 的 定义 知道 它 是 无 穷 的 . 另 一 方面 , 由 本 节 开 始 的 陈述 显然 有 
Pr+l 和 pr .pah(0). 因此 , 由 汇 pr 的 发 散 性 要 求 p2n(0) = 1. 

现在 讨论 一 般 的 区 间 五 + 上 首先 假设 下 是 非 算术 的 . 根据 5.4 节 的 引 理 2, 对 

@ 本 定理 是 4.6 节 中 第 2 个 0-1 律 的 推论 ,如果 p(T 十 站 是 随机 游 动 进入 了 十 t 无 穷 多 次 的 概率 ， 


那么 对 于 一 个 固定 的 世 ,函数 ” 只 能 取 值 0 或 1. 另 一 方面 , 如 果 考 虑 随机 游 动 的 第 1 步 , 可 以 看 
出 p= 到, 因此 yp 二 const ( 见 11.9 节 )- 
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于 某 一 k, 每 个 区 间 包 含 F** 的 一 个 增 点 , 因此 对 于 所 有 的 h > 0 和 所 有 的 t, 随 
机 游 动 进入 I +t 的 概率 palt) 是 正 的 . 但 是 我 们 已 经 看 到 ,即使 在 进入 五 十 上 以 
后 , 随机 游 动 还 必然 会 回 到 也 ,根据 本 节 开 始 的 陈述 , 这 蕴含 pzh(-t) =1. 因为 h 
和 是 任意 的 , 所 以 这 就 对 算术 分 布 完成 了 证 明 . 但 是 同样 的 论证 也 适用 于 算术 分 
布 . > 

在 检验 U{T} 的 级 数 (10.1) 是 否 收敛 时 , 我 们 通常 依靠 极限 定理 , 这 些 定理 仅 
对 于 大 区 间 提 供 信息 . 在 这 种 情形 下 ,可 以 依靠 下 列 的 ; 
准则 ”如果 局 是 阴 时 的 , 则 当 z 一 oo 时 ,，z-1U{I]} 是 有 界 的 . 

由 (10.2), 这 个 断言 是 显然 的 , 因为 任何 区 间 Inn 可 分 布 n 个 形 如 +t 的 区 
间 . 作为 方法 的 一 种 说 明 , 我 们 来 证 明 : 
定理 4 一 个 分 布 的 期 望 为 y, 如 果 J 二 0, 则 此 分 布 是 常 返 的 ; 如 果 几 天 0, 则 此 
分 布 是 聊 时 的 . 
证 设 p = 0. 根据 弱 大 数 定律 , 存在 一 个 整数 ne， 使 得 对 于 所 有 的 n>neP{lSn| < 
en}> pe 因此 , 对 于 满足 ne <n<a/e 的 n, F"*{I,} > 2 如 果 a > 2ene, 那么 
至 少 有 o/(2e) 个 整数 n 满足 这 个 条 件 , 因此 U{I。} > a/(4e). 因为 e 是 任意 的 , 所 
以 这 蕴含 比 a-'U{I4} 是 无 界 的 , 因而 下 不 可 能 是 瞬时 的 . 

如 果 人 > 0, 那么 强大 数 定律 保证 ,“ 对 于 所 有 充分 大 的 n，S 为 正 ”的 概率 任 
意 地 接近 于 1. 因此 , 随机 游 动 进入 负 半 直线 无 穷 多 次 的 概率 是 零 ,， 于 是 下 是 瞬时 
的 . p> 
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图 6-2 ”由 柯 西 分 布 产 生 的 随机 游 动 (为 了 消除 图 形 的 过 份 大 的 跳跃 ， 
我 们 对 这 个 分 布 进行 了 截 屁 )- 
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在 常 返 过 程 中 , 序列 {Sm} 必然 无 穷 多 次 地 改变 符号 , 因此 上 升 阶梯 过 程 和 下 
降 阶 梯 过 程 是 常 返 的 . 令 人 惊奇 的 是 ,其 道 不 真 . 即使 在 皮 时 随机 游 动 中 , {5n} 也 
可 以 (以 概率 1) 无 穷 多 次 地 改变 符号 . 事实 上 , 当 下 是 对 称 分 布 时 情况 就 是 如 此 . 因 
为 在 有 穷 区 间 =05a 上 逗留 的 次 数 是 有 限 的 ， 所 以 这 蕴含 (很 粗略 地 说 ) 符号 的 改 
变 是 由 于 跳跃 度 极 大 的 偶然 的 跳跃 : |Sn"| 可 能 超过 任何 界限 , 但 无 论 a 多么 大 , 奇 
异 的 不 等 式 Xn+1 < 一 Sn 一 a 将 无 穷 多 次 地 发 生 . 

图 6-2 说 明了 大 跳跃 的 发 生 , 但 它 并 没有 完全 表达 了 这 种 现象 , 因为 为 了 得 到 
有 限 的 图 形 ,所 以 必须 对 此 分 布 进行 截 尾 . 
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很 容易 把 第 1 卷 第 15 章 中 的 离散 马尔 可 夫 链 推广 到 欧 几 里 得 (以 及 更 一 般 的 ) 
空间 . 在 离散 情形 中 , 转移 概率 由 含有 元 素 pij 的 随机 矩阵 给 出 , 这 和 矩阵 的 行 是 概率 
分 布 . 现在 我 们 必须 考虑 从 点 z 向 R" 中 的 任意 区 间或 集合 了 的 转移 ; 用 天 (z, 六 
表示 这 个 转移 的 概率 . 新 的 特点 是 我 们 必须 附加 某 些 正则 性 条 件 , 以 保证 必要 的 积 
分 可 以 进行 . 对 大 多 数 用 途 , 连续 性 这 个 条 件 就 足够 了 ,但 是 限制 于 完全 的 一 般 性 
将 得 不 到 什么 东西 . 
定义 1 随机 核 KK 是 这 样 一 个 二 元 ( 即 一 个 点 与 一 个 集合 ) 函数 ,使 得 (i) 对 于 国 
定 的 2,K(z,T) 是 中 一 个 概率 分 布 ,并且 (ii) 对 于 任 一 区 间 也 ,天 (z, 了) 是 z 的 
贝尔 函数 . 

没有 要 求 K 定义 在 整个 空间 上 . 如 果 z 和 卫 限制 于 集合 2 上 ， 那么 我 们 称 
天 集中 在 8 上 . 有 时 需要 容许 有 亏损 分 布 ,这样 我 们 就 有 次 随机 核 . 通常 ,，K 具有 
形式 


K(z,T)= / k(z,Y)dy, (11.1) 
在 这 种 情形 下 , 称 上 为 一 个 随机 密度 核 . 按照 5.3 节 (3.3) 的 约定 , 我 们 用 简单 符号 
K(z,dy) = k(z,y)dy 


来 表示 (11.1). [严格 说 来 , k 表示 关于 勒 贝 格 测度 或 长 度 的 密度 , 关于 任意 测度 m 
的 密度 表示 为 K(z, dy) = k(z,y)m{dy}. ] 

在 给 出 马尔 可 夫 链 的 正式 定义 之 前 , 我 们 可 以 从 离散 情形 类 推 , 来 准备 合适 的 
分 析 工 具 . 从 z 经 过 两 步 转移 到 的 概率 可 定义 为 


KO, 7) = [ Klasdy) Ky, Tr), G12) 
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积分 区 域 是 整个 空间 或 是 K 所 集中 的 集合 2. 关系 式 (11.2) 说 明 , 第 1 步 从 = 转 
移 到 某 点 y, 第 2 步 从 y 转移 到 T. 最 重要 的 假定 是 , 给 定 一 个 中 间 点 y, 过 去 的 
历史 决 不 影响 到 将 来 的 转移 . 类 似 的 论证 对 于 高 阶 转移 概率 K("m) 也 成 立 . 如 果 令 
K(D = KK, 那么 对 任意 的 正 整数 , 有 


Kmtn™)(z, T) = f K™(z,dy)K™ (y, T); (11.3) 
n 


当 m=n= 1 时 , 它 化 为 (11.2). 保持 m = 1, 并 令 n = 1,2,3,…, 我 们 就 得 到 
Km 的 归纳 定义 . 为 了 一 致 起 见 , 我 们 定义 K() 为 集中 在 > 上 的 概率 分 布 (所 谓 
的 科 罗 内 克 (Kronecker)6 核 ). 于 是 (11.3) 对 于 m > 0,n > 0 者 成立. 两 个 核 之 间 的 
运算 (11.3) 在 其 他 领域 中 也 经 常 出 现 , 通常 称 之 为 核 的 合成 . 它 在 各 个 方面 都 类 似 
于 矩阵 的 乘法 . 
几乎 不 必 强 调 核 K(m 是 随机 的 . 如 果 K 有 密度, 那么 K(") 也 有 和 密度, 并且 密 
度 的 合成 公式 是 
k(m+tn)(z, z) = 人 km™)(z, yk™ (y, z)dy. (11.4) 


例 (a) 老 积 . 如 果 ktz,3) = f(y 一 z), 其 中 是 一 个 概率 密度 ,那么 合成 (11.4) 
化 为 普通 的 卷 积 . 如 果 K 是 齐 次 的 , 即 


K(z,T)= K(z+ s,T + 8), 


其 中 研 +s 是 把 了 平移 s 后 所 得 到 的 集合 , 那么 上 述 结论 一 般 也 是 正确 的 ,关于 
圆周 上 的 卷 积 , 见 8.7 节 的 定理 3. 
例 (b) 磁 术 时 的 能 量 损失 . 在 物理 学 中 , 通常 把 质点 的 逐次 碰撞 作为 随机 过 程 来 
处 理 , 使 得 如 果 在 碰撞 前 的 能 基 (质量 ) 等 于 z > 0, 那么 碰撞 后 的 能 基 (质量 ) 是 这 
样 一 个 随机 变量 Y, 使 得 P{Y e T} = 天 (z, 站)， 其 中 K 是 一 个 随机 核 . 标准 的 假 
定 是 ,只 可 能 发 生 损失 ,比值 Y/z 的 分 布 G 与 = 无 关 , 于 是 P{Y < y} = G(y/z)， 
此 式 定义 了 一 个 随机 核 . 

在 一 个 有 关 的 恒星 辐射 问题 中 [10.2 节 例 (b)] 阿 姆 巴 朱 米 扬 (Ambarzumian) 对 
于 0<y<1 考虑 了 G(y) = 的 特殊 情形 , 其 中 和 是 一 个 正常 数 . 这 对 应 于 集中 
在 0<y<z 上 的 密度 核 Xiz->, 容易 验证 ,高 阶 密度 为 


Xr A—1 n-l 
kW (z,y) = [CE 人 = ， 0<y<z. {11.5) 


特殊 值 和 = 1 对 应 于 均匀 分 布 (损失 部 分 是 “随机 分 布 ” 的 )， 于 是 (11.5) 化 成 1.8 
节 (8.2). 史 在 10.1 节 例 (a) 中 继续 讨论 . ] 
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例 (c) ”随机 链 . 考虑 R? 中 的 链 (或 折线 ), 链 节 有 单位 长 度 , 并 且 相 邻 链 节 之 间 的 
角 依 赖 于 一 个 机 会 作用 . 它们 的 许多 变形 (常常 是 非常 复杂 的 ) 出 现在 聚合 物化 学 
中 , 但 是 我 们 只 考虑 邻 角 是 独立 随机 变量 的 情形 . 

所 谓 端点 为 A 和 B 的 链 的 长 度 L， 指 的 是 4 和 B 之 间 的 距离 ， 把 一 个 单位 
链 节 附加 到 一 个 长 度 为 z 的 链 上 去 , 结果 得 到 一 个 长 度 为 VT 十 1 一 22cos6 的 链 ， 
其 中 9 是 新 链 带 与 4, B 联 线 之 间 的 角 . 我 们 把 9 作为 随机 变量 来 处 理 ， 特 别 考虑 
两 个 在 化 学 中 具有 特殊 价值 的 分 布 . ， 

加 设 9 等 于 60" 和 120° 的 概率 均 为 3. 于 是 cosb = 土 ， 被 加 长 的 链 的 长 度 
服从 随机 核 K(z, 古 ), 此 核 赋予 两 点 V2 十 2 十 1 的 概率 都 是 到 对 于 固定 的 z, 分 
布 Ko 集中 在 2" 个 点 上 . 

(ii) 设 新 链 节 的 方向 是 “随机 ”选择 的 , 即 假设 cos9 在 -TI 中 是 均匀 分 布 的 . 
( 见 1.10 节 ) 被 加 长 的 链 的 长 度 工 界 于 x 十 1 和 |z 一 1| 之 间 . 在 这 个 范围 内 , 根据 
余弦 定理 有 


P{L <Y} =P{2zc0s0 > z+1+} 
= 3 一 [z2 二 1 二 2]/4z. 
因此 , 长 度 由 下 面 的 随机 密度 核 确定 : 
k(z,y) =y/27, lz—ll<y<z+l1. 


由 (n 十 1) 个 链 节 组 成 的 链 的 长 度 n+l 有 一 个 密度 "(1,g). (见习 题 23.) 
例 (d) 离散 的 马尔 可 夫 链 可 以 把 随机 矩阵 (pij) 看 成 是 一 个 定义 在 正 整数 集合 2 
上 的 关于 一 个 测度 m 的 随机 密度 (i,j) = pij, 这 个 m 对 于 每 个 整数 赋予 单位 质 
基 . 
绝对 概率 与 平稳 概率 
称 序列 Xo, X1,… 服从 转移 概率 K(", 指 的 是 KK"(z,T) 是 事件 {Xm+n e 站 
在 给 定 Xm = z 下 的 条 件 概 率 . 如 果 Xo 的 概率 分 布 是 vo, 那么 Xn 的 概率 分 布 为 


wt{T) = 六 vo{dz}K™(z, T). (11.6) 
定义 2 称 分 布 vo 是 关于 KK 的 平稳 分 布 ， 如果 对 于 所 有 的 n,vn = 70， 即 如 果 
mt 站 = [ wlar}k (er). (11.7) 


关于 平稳 分 布 的 基本 事实 与 在 离散 马尔 可 夫 链 的 情形 中 一 样 . 对 KK 附加 较 弱 
的 正则 性 条 件 后 ,存在 唯一 的 一 个 平稳 分 布 ， 它 表示 Xn 在 任 一 初始 分 布下 的 渐 近 
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分 布 . 换 句 话 说 ,初始 状态 的 影响 逐渐 消失 ， 系 统 趋 于 由 平稳 解 支配 的 稳定 状态 . 
这 是 遍历 定理 的 一 种 形式 . 

例 (e) ” (9.1) 中 定义 的 排队 过 程 {Yn} 是 一 个 集中 在 闭 区间 0,ce 上 的 马尔 可 夫 过 
程 . 转移 概率 只 对 z,y > 0 才 有 定义 ,而且 K(z, 0,y) = F(y 一 z). 我 们 将 在 8.7 节 
中 证 明 平稳 测度 的 存在 性 . 

例 (f) 设 XX,X2,… 是 相互 独立 的 正 变量 , 它们 的 共同 分 布 下 集中 在 05 上 , 严 
有 一 个 连续 密度 f. 下 面 用 递 推 方式 定义 一 个 随机 变量 序列 {Yi}: 


Y=X, Yn = |Yn— Xn (11.8) 
那么 {Yi} 是 一 个 集中 在 下 co 上 的 马尔 可 夫 链 , 具有 转移 概率 密度 


ko) = TF-W+fety), 0<y<s, 


f(z+Y) >z>0. (11.9) 


平稳 密度 9 的 定义 方程 是 
ow)= [get wiet gla)f(et yar. (11.10) 
0 0 
如 果 亚 有 有 限 的 期 望 /那么 
gy) = p71 — F(y)] (11.11) 


是 一 个 平稳 概率 密度 . 事实 上 ,利用 简单 的 分 步 积分 可 以 证 明 9 满足 ?(11.10). 我 
们 由 5.6 节 (6.3) 知道 , 9 是 一 个 概率 密度 . (见习 题 22.) 
例 (g) 技术 上 的 应 用 .2 长 途 电话 线 是 由 一 条 条 的 电缆 组 成 的 ， 电 缆 的 特征 服从 
统计 起 伏 . 我 们 把 与 理想 值 的 偏差 作为 独立 随机 变量 歼 , 区 ,,… 来 处 理 ， 并 假设 它 
们 的 作用 是 可 加 的 . 倒转 一 条 电缆 ， 则 改变 由 它 引 起 的 偏差 值 的 符号 . 假定 偏差 区 
是 对 称 的 ， 令 Xk = |Yi|. 长 途 电话 线 的 有 效 建造 可 以 按照 下 列 归纳 法 则 进行 : 把 
第 (n + 1) 条 电缆 联接 在 这 样 的 位 置 上 ， 使 得 由 它 引 起 的 误差 的 符号 与 前 n 条 电 
缆 的 累积 误差 的 符号 相反 . 那么 累积 误差 满足 法 则 (11.8); 平稳 密度 (11.11) 实际 
上 是 一 个 极限 分 布 : 由 n 条 电缆 组 成 的 电话 线 的 误差 (对 于 很 大 的 n) 的 近似 密度 
为 (11.11). 另 一 方面 , 如 果 各 条 电缆 是 随机 地 联接 在 一 起 的 , 那么 可 以 应 用 中 心 极 
@@ 人 们 怎样 发 现 了 这 一 点 ? 假设 g 和 了 有 导数 , 我们 可 以 对 (11.10) 进行 形式 微分 . 利用 分 部 积分 
可 得 关系 式 9 (y) = 一 g(0)f(y), 此 式 说 明 9 应 当 具有 形式 (11.11). 然后 不 加 可 微 性 条 件 , 直接 
验证 (11.11) 的 正确 性 . 
@ 是 根据 H. von Schelling, Elektrische Nachr.-Technik, vol. 20(1943) pp. 251-259 中 所 用 的 高 
散 模型 改编 的 . 
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限定 理 , 误差 的 方差 随 n( 即 电缆 的 长 度 ) 线性 增加 . 因此 , 利用 检验 误差 符号 的 简 
单 办 法 可 以 使 它 保持 有 界 . > 
在 上 例 中 ,马尔 可 夫 序列 Xo, X1,-… 是 用 初始 分 布 wm 和 转移 概率 K 定义 的 . 
(Xo,X1,…,，Xn) 的 联合 分 布 具 有 形式 
vo{dzo}K (xo, dz21).…* K(zn-1, dzn), 


这 已 经 在 3.8 节 和 第 1 卷 15.1 节 中 讨论 过 了 . 这 里 我 们 得 到 了 一 个 可 以 说 明 用 
条 件 概 率 定义 绝对 概率 的 优点 的 典型 例子 . 更 系统 的 方法 是 以 下 列 假设 为 定义 开 
始 的 : 

P{Xn+1 ETIXo = zo……,Xn = Tn} = K(xn, Tt). (11.12) 


这 里 ,马尔 可 夫 性 由 下 列 事实 来 表示 : 上 式 右边 与 zo,z1,…,zn-1 无 关 , 因此 “过 
去 的 历史 ”没有 作用 . 这 个 定义 的 缺点 是 我 们 必须 解决 条 件 概率 的 存在 性 、 唯 一 性 
等 问题 . 
(关于 依赖 于 连续 时 间 参 数 的 马尔 可 夫 过 程 , 见 第 10 章 . ) 
*6.12 鞭 


首先 我 们 可 以 考虑 这 样 的 随机 过 程 {Xn}, 使 得 (Xi,……Xn) 的 联合 分 布 有 一 
个 严格 正 的 连续 密度 pn. 那么 可 用 3.2 节 中 的 初等 方法 定义 条 件 密度 和 期 望 . 假设 
变 基 Xn 和 区 的 期 望 存在 . 

称 序列 {Xn} 是 绝对 公平 的 ,如果 对 于 n= 1,2,…， 


E(X1)=0, E(XntilXi1,:…, Xn) =0. (12.1) 
称 序列 {Y%} 是 一 个 糯 , 如 果 
E(YnnilYi, ,Yn) = Yn = 1,2,.….. (12.2) 


(下 面 将 给 出 一 个 更 灵活 的 定义 . ) 
两 个 类 型 之 间 的 关系 非常 简单 . 给 定 一 个 绝对 公平 的 序列 {Xn}, 令 


Yn =X1+:*…+ Xn+e, (12.3) 
其 中 < 是 一 个 常数 , 那么 


E(YnrilX1,*…, Xn) = Yn. (12.4) 
* 我 们 之 所 以 讨论 鞭 , 是 由 于 它 非 常 重要 ,但 是 在 本 书 中 我 们 没有 把 它 作为 一 个 工具 使 用 . 
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诸 条 件 变量 X; 可 以 换 为 欢 ， 因 而 (12.4) 等 价 于 (12.2)、 另 一 方面 ， 给 定 一 个 鞭 
Ti 令 入 = 和 到 一 BE)Xn+l = Yn 一 Yn 那么 {Xn} 是 一 个 绝对 公平 的 序 
列 , (12.3) 对 于 c= E(Yi) 成 立 . 因此 , {Yn} 是 一 个 灶 , 当 且 仅 当 它 具有 形式 (12.3)， 
其 中 {Xn} 是 绝对 公平 的 、 

园 的 概念 应 归功 于 P. 列 维 . 但 是 , 认识 到 它 的 出 乎 意外 的 潜力 并 发 展 了 这 个 
理论 的 却 是 杜 布 . 在 7.9 节 中 我 们 将 证 明 , 在 较 弱 的 有 界 性 条 件 下 , 园 变 量 丈 收 剑 
于 一 个 极限 , 这 个 事实 对 于 现代 随机 过 程 理论 是 很 重要 的 . 

例 (a) ”古典 的 赌博 与 满足 E(Xn)= 0 的 独立 变量 X 有 关 . 这 样 的 赌博 是 绝对 公 
平 的 9 , 部 分 和 Sn = Xi 十 … 十 Xn 构成 一 个 鞭 . 现在 考虑 普通 的 搁 硬 币 的 赌博 , 其 
中 赌 徒 按照 某 种 依赖 于 以 前 的 投掷 结果 的 规则 选 定 赌 金 ， 逐次 的 赢 金 不 再 是 独立 
的 随机 变量 了 , 但 赌博 仍然 是 绝对 公平 的 . 公平 赌博 的 思想 是 ,过 去 的 知识 不 能 使 
赌 徒 改善 他 的 运气 . 在 直观 上 , 这 表示 绝对 公平 的 赌博 在 任 一 种 赌博 方式 下 , 即 在 
允许 不 参加 个 别 投掷 的 规则 下 ,仍然 是 绝对 公平 的 . 我 们 将 看 到 事实 确 是 如 此 . 

例 (b) [第 1 卷 5.2 节 (c) 的 波 利 亚 维 子 模型 . 一 个 铅 子 包含 6 个 黑 球 和 7 个 红 
球 . 随机 地 取出 一 个 球 . 把 它 放 回 , 并 加 入 “个 与 取出 的 那个 球 有 相同 颜色 的 球 , 令 
= 7 Y 是 第 n 次 取 球 后 得 到 的 黑 球 的 比率 , 那么 {Yn} 是 一 个 观 . 在 这 种 
情形 下 , 收敛 性 定理 保证 了 极限 分 布 的 存在 [ 见 7.4 节 例 (a) 和 7.9 节 例 (a)]. 

例 (c) 和谐 函数 9. 设 {Xn} 是 一 个 马尔 可 夫 链 ,其 转移 概率 由 随机 核 K 给 出 . 
关于 Xn 的 期 望 我 们 什么 也 没有 假设 . 称 函 数 u 关于 K 是 和 谐 的 , 如 果 


uz) = { Kl owuly). (12.5) 


用 Yi = wu(Xk) 定义 随机 变量 ,假设 所 有 的 期 望都 存在 (例如 ,wu 是 有 界 的 ). 关 
系 式 (12.5) 和 E(Yk+1|Xk = z) = u(z) 相同 , 因此 E(Yikri|Xk) = 了 区. 因为 {Xk} 是 
马尔 可 夫 链 ， 所 以 这 蕴含 (12.4); 因为 Y 是 Xk 的 函数 ， 所 以 这 又 蕴含 (12.2)( 见 
5.11 节 例 (a)). 因此 , {Ym} 是 一 个 装 . 这 个 结果 在 马尔 可 夫 链 的 边界 理论 中 具有 重 
大 意义 ,因为 丈 的 极限 的 存在 性 通常 草 含 给 定 序列 {Xn} 的 极限 的 存在 性 , [ 见 例 
(6 和 7.9 节 例 (c)] 
例 (d) ” 似 然 比 . 假设 已 知 在 随机 过 程 Xi, X2,… 中 ，(X1,… ,Xn) 的 联合 密度 或 
是 pn 或 是 gn, 但 我 们 不 知道 是 哪 一 个 . 为 了 作出 判定 ,统计 学 家 引入 一 个 新 变量 
CCD Kn) 
Pn(X1,.…*, Xn) 
”。@ 这 个 概念 的 实际 局 限 性 已 在 第 1 卷 10.3 节 中 讨论 过 了 . 应 当 回忆 一 下 , 有 这 样 -种 “公平 " 的 由 


博 , 使 第 n 次 投掷 后 ， 赌 徒 的 赢 金 以 概率 > 1 一 < 与 mn/ lnm 一 样 大 . 
@ 这 个 术语 是 享 特 (G. Hunt) 引 入 的 . 


ee (12.6) 
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在 充分 正则 的 条 件 下 ,似乎 应 该 有 : 如 果真 实 密度 是 pn, 那么 X1,…, Xn 的 观察 
值 一 般 说 来 应 聚集 在 使 pn 较 大 的 点 上 . 如 果 事 实 确 是 如 此 ,那么 根据 真实 密度 是 
Pn 或 gn, Yn 可 能 很 小 或 很 大 . 因此 , {Y%} 的 渐 近 性 质 在 统计 决策 理论 中 是 很 有 意 
义 的 . 

为 了 简单 起 见 ， 我 们 假设 密度 pn 是 一 个 严格 正 的 连续 函数 . 如果 忆 , 是 真实 
密度 , 那么 Xn+1 在 给 定 X1,…,X。 下 的 条 件 密度 等 于 比 pn+1/pn, 因此 


E(Yn+ilX1 = 21,.…, Xn = Zn) 


广 gnt1(T1,***, Tn;Yy) .Pnti(Th ny), 
-oo pn+l(z1 Zr) pn(T1,.**, Tn) 


(12.7) 


因子 pn+1 相互 抵消 . 第 2 个 分 母 与 y 无 关 , gn+1 的 积分 由 边缘 密度 gn+1 给 出 . 因 
此 , (12.7) 化 成 gn/pn, 从 而 (12.4) 是 正确 的 . 因此 , 在 现在 的 条 件 下 , 似 然 比 3 构 
成 一 个 黄 . p 

在 (12.2) 中 所 用 的 条 件 并 不 太 好 , 因为 我 们 常常 必须 把 条 件 变量 页 ，…2 换 
成 它们 的 某 些 函数 ，[ 在 (12.4) 中 就 是 这 样 ] 例 (a) 揭示 了 较 大 的 缺点 .基本 过 程 
(例如 ， 撞 硬币 或 轮 盘 赌博 ) 是 用 一 列 随机 变量 Z" 表示 的 ， 赌 徒 在 第 (n + 1) 次 试 
验 的 赢 金 是 Z1,…, Zn+1 和 其 他 变 基 的 某 一 函数 . 可 观察 的 过 去 用 (21,…, Zn) 表 
示 , (21,…, Zn) 提供 的 信息 也 许 比 过 去 的 赢 金 提供 的 信息 还 要 多 . 例如 ,如 果 赌 徒 
不 参加 号 码 为 1, 3，5, … 的 投掷 ， 那 么 他 直到 时 刻 2n 的 赢 金 所 提供 的 信息 充 其 
量 等 于 22, 24,…, 2Z2n 所 提供 的 信息 . 这 里 21, 2s,… 所 提供 的 附加 信息 从 原则 上 
讲 是 一 个 优点 ,在 这 种 情形 下 的 绝对 公平 性 建立 在 以 2Z1,…, 2n 为 条 件 的 基础 上 . 
因此 ,以 几 个 (由 随机 变量 组 成 的 ) 集合 为 条 件 也 许 是 必要 的 , 为 了 顾及 到 所 有 的 
情况 ,最 好 是 利用 任意 的 事件 o 代数 作为 条 件 . 

考虑 任 一 个 概率 空间 中 的 随机 变量 序列 {Y%}, 并 用 4 表示 (i,… ,Yh) 产生 
的 事件 o 代数 ( 见 5.10 节 ), 那么 定义 关系 式 (12.2) 和 E{Jyn+ilt} = Yh 相同 . 我 
们 想 把 此 式 作为 定义 关系 式 , 但 把 o 代数 1 换 为 较 大 的 o 代数 8. 在 大 多 数 情 
形 下 , Bn 是 由 六,…, Ys 和 其 他 的 依赖 于 过 去 的 随机 变量 产生 的 . 想法 是 , 任 一 依 
赖 于 过 去 的 随机 变量 应 当 是 关于 多 可 测 的 . 在 这 个 意义 下 ,， 色 。 表示 过 程 的 过 去 
历史 中 所 包含 的 信息 . 由 于 这 信息 随时 间 的 变化 变 得 越 来 越 丰富 ,所 以 我 们 将 假设 
多 是 增加 的 , 即 

B1 C 好 2C (12.8) 

定义 1 设 Xi,X2,… 是 随机 变量 , 它们 的 期 望都 存在 . 设 双 1, 双 2，…… 是 满足 (12.8) 
的 事件 og 代数 . 

当 且 仅 当 

E(Ynri|Bn) = Yn (12.9) 


186 第 6 章 一 些 重要 的 分 布 和 过 程 


时 ,序列 {Yn} 关于 { 吧 。} 是 一 个 鞭 - 

[由 于 条 件 期 望 的 不 唯一 性 , (12.9) 应 读 作 “存在 一 个 使 (12.9) 成 立 的 条 件 期 望 
的 代表 ”. 这 个 说 明 在 以 后 也 适用 . ] 

注意 , (12.9) 蕴含 Yi 是 8 可 测 的 , 这 有 两 个 重要 的 推论 . 因为 Bn Bn-1， 
所 以 5.7 节 (11.7) 关于 累 次 期 望 的 基本 恒等式 说 明 


E(Yn+1|Bn1) = Yn-1. 
由 归纳 法 可 以 看 出 , 定义 式 (12.9) 纺 含 更 强 的 关系 式 
E(Yn+1|Bk) = ,k= 1,.…,n. (12.10) 


由 此 特别 推出 ， 装 的 每 个 子 序 列 Yo oa … 也 是 革 ， 其 次 ， 我 们 注意 ，%B。 包含 
由 变量 六 ,…, Yh 产生 的 o 代数 ,同样 的 论证 表明 ，{Y%} 关于 {4} 也 是 鞭 . 因 
此 , (12.9) 副 含 (12.2). 
例 (e) ” 设 o 代数 Bn 满足 (12.8), 并 设 Y 是 一 个 任意 的 随机 变量 ， 它 的 期 望 存 
在 . 令 = E(Y|%,), 那么 Y 是 %。 可 测 的 ， 因 此 (12.9) 成 立 . 所 以 {Yh} 是 一 
二 和 > 
我 们 回 过 头 来 讨论 例 (a), 现在 容易 证 明 一 个 相当 一 般 的 系统 的 不 可 能 性 . 设 
{Yn} 关于 {B84} 构成 一 个 默 . 为 了 说 明 赌 徒 可 以 不 参加 第 n 次 投 搓 ， 我 们 引入 一 
个 决策 函数 en: 这 是 一 个 只 取 0 和 1 的 Bm-1 可 测 的 9 随机 变量 . 结果 当 en = 0 时 ， 
财 徒 不 参加 第 n 次 投掷 ; 当 en = 1 时 , 他 参加 第 另 次 投 搓 . 在 这 种 情形 下 , 他 在 第 
见 次 投掷 的 赢 金 是 Y 一 Yn-1. 用 2n 表示 他 直到 第 n 次 (包括 第 n 次 ) 投掷 的 累积 
赢 金 , 我 们 有 
Zn = Zn-1 + en[Yn — Yn-i]. (12.11) 
由 归纳 法 可 见 ，Zn 的 期 望 存在 . 此 外 ,Zn -ien 和 Y-1 是 -1 可 测 的 , 因此 [ 见 
5.11 节 (11.6)] 


BE(Zn|Bn1) = Zn-1 + en[E(Yn|Bn 1) 一 Yn. (12.12) 


因为 {Yh} 是 一 个 观 ， 所 以 括 导 内 的 式 子 等 于 零 ， 从 而 {Zn} 是 一 个 鞠 . 因此 , 我 们 
证 明了 一 个 应 归功 于 哈 尔 莫 斯 (P. R. Halmos) 的 定理 , 这 个 定理 表明 ， 
系统 的 不 可 能 性 。 每 个 决策 函数 序列 e1,e2，… 把 鞭 {fX} 变 成 一 个 灶 {Zn}. 

最 重要 的 特殊 情形 是 可 选 停止 . 这 指 的 是 一 个 接受 前 N 次 试验 而 跳 过 以 后 的 
所 有 试验 的 系统 ; 第 N 次 试验 是 最 后 一 次 试验 . 这 里 N( 停 止 的 时 刻 ) 是 这 样 一 个 随 


@ 这 个 条 件 保证 了 决策 是 根据 过 去 的 观察 历史 作出 的 . 任何 一 种 数学 理论 都 不 能 反 驶 对 未 来 的 预见 ， 
我 们 应 把 它 从 我 们 的 模型 中 排除 出 去 . 
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机 变量 , 使 得 事件 {N > &} 在 Bk 中 . (利用 定理 中 的 记号 , 当 N > k 一 1 时, ek = 1; 
当 N<k 一 1 时 , ek =0. ) 因此 我 们 有 
系 可 选 停止 不 影响 著 性 质 . 
例 (f) ”直线 上 的 简单 随机 游 动 从 原点 开始 ， 质 点 以 概率 p 向 右 移动 一 步 ， 以 
概率 g = 1 一 p 向 左 移动 一 步 ， 如 果 Sn 是 质点 在 时 刻 n 的 位 置 ， 那 么 容易 看 
到 ,区 = (qlp)*” 构成 一 个 鞭 ， 其 中 ECG) = 1,E(Y6) = 1. [这 是 例 (c) 的 一 个 特殊 
情形 . ] 

在 破产 问题 中 , 随机 游 动 在 它 首次 到 达 两 个 位 置 -a 和 之 一 时 停止 , 其 中 a 
和 "都 是 正 整数 . 在 这 种 修改 了 的 过 程 中 , -a < Sn < b, Sn 以 概率 1 最 终 停 在 6 或 
-aa 上 .用 > 和 1-z 表示 相 应 的 概率 . 因为 5, 是 有 界 的 ,所 以 


ou 人 oa 人 


但 是 ,因为 鞭 的 期 望 是 常数 ,所 以 E(5n) = 1. 因此 , 右边 等 于 1, 并 且 这 个 线性 方 
程 确定 了 z. 于 是 我 们 求 出 了 停 在 上 的 概率 , 在 第 1 卷 14.2 节 中 曾 用 不 同方 法 导 
出 过 这 个 概率 . 当 p = g 时 公式 就 不 成 立 了 , 但 在 这 种 情形 下 , {5S} 是 一 个 鞭 , 同 
样 的 论证 可 证 明 z = a/(a 十 如. 虽然 这 个 结果 是 初等 的 且 是 众所周知 的 , 但 是 这 个 
论证 说 明了 菇 论 的 可 能 的 用 途 . 
例 (g) 关于 系统. 考虑 独立 随机 变量 X 的 序列 , 其 中 Xn 取 值 上 2" 的 概率 均 为 
到 赌 徒 通过 掷 一 硬币 来 决定 他 是 否 参 加 第 n 次 打赌. 他 第 一 次 参加 打赌 发 生 在 时 
刻 n 的 概率 是 2-". 在 这 种 情形 下 ,他 的 赢 金 是 土 2". 因此 ， 贱 徒 在 他 的 第 一 次 打 
财 中 的 说 金 是 一 个 期 望 不 存在 的 随机 变 重 . 因此 , 系统 定理 依赖 于 我 们 没有 改变 时 
间 参 数 这 个 事实 . - 
我 们 常常 必须 和 绝对 值 及 不 等 式 打交道 , 因此 为 方便 起 见 , 我 们 给 满足 (12.9)( 把 
等 式 换 为 不 等 式 ) 的 过 程 起 一 个 名 字 . 
定义 2 称 序列 {Yh} 是 一 个 下 甘 ， 如果 


E(Ynti|Bn) > Yn. 
由 此 又 立即 推出 , 每 个 下 南都 满足 更 强 的 条 件 : 
E(Yn+i|Bk) > Ye,， k=1,..,n. (12.13) 


引 理 ”如 果 以 是 一 个 西 孙 数 , {Yn} 是 一 个 著 , 且 u(Yh) 的 期 望 存 在 ,那么 {u(Yn)} 
也 是 一 个 下 鞍 . 特别 地 , {|Yn|} 是 一 个 下 鞭 


@ 比较 古老 的 术语 “下 半 坎 ”已 经 废弃 不 用 了 . 
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根据 久生 不 等 式 [5.8 节 (8.6)], 引 理 的 证 明 是 显然 的 . 这 个 不 等 式 既 适 用 于 普通 
的 期 望 , 也 适用 于 条 件 期 望 . 它 说 明 


E(u(Yn+1)|Bn) > u(E(Yn+1|Bn)), (12.14) 


右边 等 于 u(Yn). 
同样 的 论证 表明 , 如 果 {Ym} 是 一 个 下 款 , u 是 一 个 非 减 的 是 函数, 且 u(Y%) 的 
望 期 存在 , 那么 {u(Y%)} 也 是 一 个 下 鞠 . 


6.13 习 题 


1. 稳定 分 布 的 定义 (1.2) 等 价 于 : R 是 稳定 的 ， 当 且 仅 当 对 于 任意 常数 cu cx， 存 在 常数 

c 和 vw, 使 得 
CX1 + caX2 EcX +v. 

2. 每 个 稳定 分 布 者 是 连续 的 . 只 要 对 于 对 称 的 已 证 明 它 就 够 了 . 由 (1.3) 证 明 , 如 果 RR 在 
点 s > 0 上 有 一 个 质量 为 p 的 原子 , 那么 它 在 形 如 s(cm + cn)/cm+n 的 每 个 点 上 有 质 
量 > 的 原子 ( 见 5.4 节 ). 此 外 , 如 果 RR 有 唯一 的 一 个 原子 , 它 位 于 原点 且 质 量 < 1， 
那么 R 太 RR 在 原点 有 一 个 质量 为 p? 的 原子 , 然而 稳定 性 要 求 RR 有 质量 为 p 的 原 

3. 为 使 下 是 稳定 的 ， 只 需要 (1.2) 对 n = 2 和 3 成 立 就 够 了 (P. 列 维 ). 
提示 : 形 如 oj 吃 (其 中 小 = 0, 士 1, 士 2,…) 的 乘积 或 者 在 而 50 中 是 稠密 的 , 或 者 是 一 
固定 数 c 的 寡 . 应 当 证 明 , 在 目前 的 情况 下 , 后 者 是 不 可 能 的 . 

注 奇怪 的 是 ,只 要 求 (1.2) 对 n = 2 成 立 是 不 够 的 . 见 17.3 节 例 (f) 和 9.10 节 的 习 
题 10. 

4. 对 于 指数 为 a = 1 的 稳定 分 布 ， 定 义 关系 式 (1.2) 中 的 中 心 参数 满足 vmn = mun 十 

num| 见 (1.6)]，(1.8) 的 类 似 公式 是 


s(Xi +u Ins)+t(X2+v Int)2(s+t)(X+v In(s+t)). 
5. 如 果 F 和 G 是 稳定 的 , 且 具 有 相同 的 指数 a, 那么 玉女 G 也 是 稳定 的 ， 其 指数 也 是 
a. 试 根据 F 和 G 的 中 心 常数 求 下 丸 G 的 中 心 常数 vn. 
6. 对 于 对 称 稳定 分 布 R，5.5 节 (5.11) 对 称 化 不 等 式 蕴含 n[1 一 R(cnz)] 是 有 界 的 . 证 


明 : R 有 阶 数 小 于 a 的 绝对 起 | 利用 5.6 节 (6.3)]. 根据 对 称 化 , 最 后 这 个 陈述 可 搬 到 非 
对 称 的 R 上 . 


7. 霍 尔 特 斯 马克 分 布 的 另 一 种 推导 . 考虑 一 个 中 心 在 原点 半径 为 7 的 球 , 把 nn 个 星 (点 ) 
独立 且 随 机 地 放 到 它 里 面 . 设 每 个 星 有 单位 质量 . 设 X1,X2,… ,Xn 是 各 个 星 产 生 的 
引力 的 = 分 量 ,Sn = Xi 十 … 二 Xm. 令 一 com 一 o0, 使 得 rarnr: 一 入 证明, Sm 


的 分 布 趋 于 特征 指数 为 3 的 对 称 稳定 分 布 . 
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10. 


1; 


12. 


13. 
14. 


15. 


16. 


17. 


.如 果 星 的 质量 是 期 望 为 1 的 随机 变量 , 若 假设 星 的 质量 是 相互 独立 的 , 并 且 也 和 星 的 


位 置 独立 ,那么 上 题 在 本 质 上 没有 改变 . 


四 维 的 绾 尔 特 斯 马克 分 布 . 秆 尔 特 斯 马克 分 布 的 四 维 类 似 分 布 是 一 个 特征 指数 为 了 的 


对 称 稳定 分 布 ，( 在 四 维 中 , 引力 和 距离 的 立方 成 反比 . ) 


通过 增加 只 取 零 值 的 哑 变 量 并 把 某 些 行 适 当地 重复 几 次 , 可 以 把 在 第 n 行 上 有 rn 个 
分 量 的 三 角形 阵列 {Xk,n} 变换 成 一 个 实质 上 与 它 等 价 的 在 第 n 行 上 有 n 个 分 量 的 三 
角形 阵列 . 


设 {Xkn} 是 一 个 零 三 角形 阵列 ， 其 中 Xun，……,Xnn 有 共同 的 分 布 Fa. 问 P{max 
(ln|，……,|Xnn|) > 6} 赵 于 零 吗 ? 

如 果 玉 有 一 个 密度 (a)f(z) = e*,(b)f(z) = ze ， 求 (6.3) 的 更 新 函数 UV 的 
密度 . 

在 一 个 可 终止 过 程 中 , F 有 一 个 密度 pce “. 求 寿命 的 分 布 和 更 新 时 刻 的 个 数 的 分 布 . 
广义 的 可 终止 更 新 过 程 . 不 假设 过 程 以 概率 9 立即 终止. 而 假设 它 以 概率 q 持续 一 段 具 
有 正常 分 布 Fo 的 随机 时 间 , 然后 停止 . 换 句 话说 , 更 新 时 刻 具 有 形式 Ti 十 … 十 Tn 十 Y， 
其 中 最 后 一 个 变量 有 不 同 的 分 布 . 证 明 : 过 程 的 持续 时 间 的 分 布 V 满足 更 新 方程 


V=gF+FAV (F(o0)=1-9g). (*) 
证 明 , 关于 大 间隔 的 等 待 时 间 问 题 可 化 成 上 题 所 述 的 过 程 的 一 个 特殊 情形 . 把 (7.4) 写 
成 (+) 的 形式 . 


泊 松 过 程 与 徐 盖 定理 .我 们 由 3.3 节 例 (d) 知道 ， 如 果 在 一 个 泊 松 过 程 中 ,有 n 个 更 
新 时 刻 出 现在 0t 中 , 那么 它们 的 (条 件 ) 分 布 是 均匀 的 . 因此 , 不 出 现 长 度 为 的 间 
隔 的 概率 1 一 V(t) 可 由 1.9 节 中 的 覆盖 定理 3 推出 : 


00 jn—l 
1-V()=e”D 过 yA (*) 
n=1 | 


(a) 验证 : 当 F(z) = 1 一 e-” 时 ， 上 式 确实 是 (7.1) 的 解 . 


(b) 假设 (*) 是 (7.1) 的 唯一 解 ， 由 它 推导 覆盖 定理 ，( 这 是 一 个 利用 随机 化 证 明 的 实 
例 . 见 第 1 卷 12.6 节 的 习题 5. ) 


在 6.7 节 例 (f) 中 等 待 第 1 个 失去 的 呼叫 所 需要 的 等 待 时 间 . 应 解释 为 一 个 可 终止 过 
程 的 总 寿命 ， 这 个 过 程 是 通过 当 呼叫 在 忙 期 中 第 1 次 出 现时 停止 原来 的 过 程 所 得 到 
的 9， 试 证 , 此 可 终止 过 程 的 忙 期 的 持续 时 间 的 分 布 也 是 了 {dt} =e-“*F{dt}, 而 且 
循环 时 间 的 分 布 为 G 友 及 . (又 见 14.10 节 的 习题 3 和 习题 4.) 


@ 这 个 简单 的 方法 代替 了 文献 中 提出 的 复杂 的 方法 ， 并 得 到 了 更 简单 的 明显 结果 . 关于 解 和 估计 , 见 


11.6 节 . 
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18. 设 V 是 6.7 节 例 (g)( 先 为 后 到 者 服务 ) 中 忙 期 的 分 布 . 证 明 : Y 满足 更 新 方程 V(t) = 
A(t) + B 妇 V(t), 其 中 A4 和 B 是 由 A{dz} = er 一 Gfdz} 和 Bfdz}j=[1- G(z)lce- 一 
确定 的 亏损 分 布 ，( 证 明 我 们 讨论 的 是 一 个 在 习题 14 的 意义 下 的 广义 可 终止 过 程 : 紧 
接 在 由 B 产生 的 更 新 过 程 的 后 面 有 一 个 不 受 干扰 的 静止 周期 , 这 个 静止 周期 的 分 布 
与 4 成 正比 . ) 

19. 泊 松 过 程 中 的 小 间隔 . 9 称 “重合 ” 发生 在 时 刻 5。, 如 果 更 新 时 刻 5。_! 和 Sn 的 距离 
< &. 求 等 待 第 1 次 重合 的 等 待 时 间 的 分 布 的 更 新 方程 ， 并 由 这 个 更 新 方程 推断 这 个 
分 布 是 正常 的 . 


20@ 推 广 . 在 标准 更 新 过 程 5 = 了 十 … 十 Ts 中, 求 事件 {Tn < 如} 第 1 次 发 生 所 需要 
的 等 待 时 间 的 分 布 的 更 新 方程 , 其 中 Yi 与 过 程 独立 , 并 且 Yi 相互 独立 , 且 有 共同 的 
分 布 G. 


21. 设 a1,…,an 是 一 有 穷 数列 ,其 部 分 和 为 
Sk = G1 十 … 二 Qk. 
递 推 地 定义 
v1 = qo0,w = (vi +an-ijU0 ,vn = (vn-1 + ar)Uo. 


用 归纳 法 证 明 : we = max[0, s1,…, sn]. 证 明 : 这 蕴含 6.9 节 的 定理 . 
22. 在 6.11 节 例 (f) 中 假设 对 于 0 < > < 1, f(z) = 1. 证 明 , g(y) = 2(1 一 y) 是 一 个 平稳 
密度 , 并 且 对 于 n > 2,k"(z,y) = g(y). 如 果 f(z) = ae-**, 那么 g(z) = f(z). 
23. 用 下 式 定义 一 个 集中 在 了 上 的 随机 密度 核 : 
1 -2)-, 0<z<y<l， 
co-| 3 


Be 0<y<z<y 


求 平稳 密度 . ( 它 满足 一 个 简单 的 微分 方程 . ) 给 出 其 概率 解释 . 


24. 一 个 在 而 IT 上 的 马尔 可 夫 链 是 这 样 的 , 使 得 如 果 X。 = z, 那么 Xn+l 在 IT 一 z,I 上 是 
均匀 分 布 的 . 证 明 : 平稳 密度 是 2z. ( 鱼 返 正 (T. Ugaheri).) 


25. 一 个 在 0 oo 上 的 马尔 可 夫 链 的 定义 如 下 : 如 果 X = z, 那么 Xn+l 在 而 2 上 是 均匀 
分 布 的 (这 里 n = 0,1,…). 试用 归纳 法 证 明 , 第 n 步 转移 有 密度 核 


2 
wew-| xm (mn 琴 ) ， 0<y<2"z, 
0, 其 他 . 
@ 关于 用 不 同方 法 处 理 的 变形 , 见 E. N. Gilbert and H. O. Pollak, Goincidences in Poisson 


Patterns, Bell System Technical J., vol. 36(1957) pp1005-1033. 
@ “大 间隔 ”问题 有 一 个 类 似 的 推广 , 且 这 种 推广 有 一 个 类 似 的 答案 . 


第 7 章 ”大 数 定律 , 在 分 析 中 的 应 用 


本 章 的 第 1 部 分 说 明 , 一 些 著名 的 深刻 的 分 析 定 理 可 以 非常 容易 地 用 概率 论 
的 方法 推导 出 来 . 7.7 节 和 7.8 节 讨论 各 种 大 数 定律 . 7.9 节 包 含 对 收敛 定理 的 一 种 
特殊 形式 , 与 其 余部 分 无 关 . 


7.1 ”主要 引 理 与 记号 


作为 准备 , 我 们 考虑 一 个 期 望 为 0、 方差 为 o? 的 一 维 分 布 G. 如 果 X1,… ,Xn 
是 具有 共同 分 布 G 的 独立 变量 , 那么 它们 的 算术 平均 值 Mn = (Xi 十 … 十 Xn)n-! 
的 期 望 为 9, 方差 为 co2n-1. 对 于 很 大 的 n, 这 个 方差 是 很 小 的 ，M" 可 能 很 接近 于 
9. 由 此 推出 ， 对 于 每 个 连续 函数 u,u(M，) 很 接近 于 v(6). 这 个 陈述 就 是 弱 大 数 定 
律 . 下 列 引 理 对 它 作 了 较 小 的 推广 , 尽管 此 引 理 很 简单 , 但 却 很 有 用 . 

对 于 n= 1,2,…, 考虑 期 望 为 0、 方差 为 o2(9) 的 分 布 族 Fn,o; 这 里 9 是 一 个 
在 有 限 或 无 限 区 间 中 变化 的 参数 . 对 于 期 望 , 我 们 利用 记号 


+o0 
了 En,e(u) = £ u(z)Fn,o{dz}. (1.1) 
引 理 ”假设 以 是 有 界 且 连续 的 , 并且 对 于 每 个 9,02(0) 一 0. 那么 


了 En.e(u) 一 u(0). (1.2) 


在 使 得 oz2(6) 一 致 地 趋 于 0 的 每 个 阅 区 间 中 ， 上 面 的 收敛 是 一 致 的 . 
证 显然 
十 oo 

[eolw) ~ulON < 人 ta) ~ uO Frotas). (13) 
存在 一 个 依赖 于 9 和 < 的 6, 使 得 当 |z -0| < 5 时 ,被 积 函 数 < < 在 这 个 邻 域外 ， 
被 积 函数 小 于 某 个 常数 M, 根据 5.7 节 (7.2) 切 比 雪夫 不 等 式 , 区 域 |z -0| > 5 所 
具有 的 概率 小 于 o2(9)5-?. 于 是 ， 只 要 取 n 为 这 样 大 , 使 得 o2(0) < e52/M， 那么 
(1.3) 的 右边 就 小 于 2e. 如 果 一 致 地 有 o2(9) 一 0, 并且 u 是 一 至 连续 的 ,那么 这 个 
对 n 的 约束 与 9 无 关 . 号 
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例 (a) ”如 果 Fn,o 是 一 个 集中 在 点 En(k = 0,…,n) 上 的 二 项 分 布 , 那么 o2(9) = 
8(1 一 0)n-1 一 0, 从 而 在 0< 9< 1 上 一 臻 地 有 


2 全 (ea 一 9)"-* ~ u(0). (1.4) 


我 们 将 在 7.2 节 中 讨论 它 的 含义 . 
例 (b) ”如 果 Fe 是 一 个 对 点 k/n 赋予 概率 e-”%(n9)*/k! 的 泊 松 分 布 , 那么 我 们 
有 02(9) = 0/n, 从 而 在 每 个 有 限 的 9 区 间 中 一 致 地 有 


ng ~ (k\) (no)* 
e Ev (9) ~ — (0). (1.5) 


这 个 公式 对 非 整 数 n 也 成 立 . (在 7.5 节 和 7.6 节 中 继续 讨论 . ) 
例 (c) ”把 Fe 取 作 一 个 期 望 为 9, 方差 为 9/n 的 工分 布 . 我 们 得 到 ， 在 每 个 有 限 
区 间 中 一 致 地 有 


F009 


只 要 把 (n 一 1)! 换 成 T(n)， 这 个 公式 对 非 整数 n 也 成 立 . 在 7.6 节 中 将 证 明 , (1.6) 
是 拉 普 拉 斯 变换 的 反 演 公式 . 

例 (d) ”统计 学 家 常常 遇 到 本 节 开始 时 所 述 的 情况 ,但 他 们 把 9 看 作 是 一 个 需要 
根据 观察 估计 的 未 知 参数 . 那么 , 用 统计 学 的 语言 来 说 , 关系 式 (1.2) 说 明 ，u(Mn) 
是 未 知 参数 u(0) 的 渐 近 无 偏 估计 量 . [如 果 (1.2) 的 两 边 相等 , 那么 此 估计 量 是 无 偏 
的 . ] 


> 
我 们 将 会 看 到 , 上 面 的 每 一 个 例子 都 将 导致 具有 不 同意 义 的 结果 , 但 是 为 了 进 
一 步 发 展 理 论 , 必须 先 做 一 些 准 备 工作 . 
差分 记号 
在 以 下 几 节 中 , 我 们 将 使 用 有 限 差分 计算 的 方便 的 记号 . 给 定 一 个 有 穷 或 无 穷 
数列 ao,a1,…, 我 们 把 差分 算 子 A 定义 为 Aai = ai+l - ai， 它 产生 一 个 新 数列 
{Aai}, 再 一 次 应 用 算 子 A, 我 们 得 到 一 个 元 素 为 


A?zai = Aai+l 一 Aai = ai+2 — 2ait1 + a 


的 数列 . 以 同样 的 方式 继续 进行 下 去 , 我 们 可 以 归纳 地 用 Ar = AA"-! 来 定义 + 次 


短 A". 容易 验证 ES 
Ara = (") -Dias;. 1.7 
“BD es Qn 


7.1 主要 引 理 与 记号 193 


为 了 一 致 起 见 ， 我 们 把 A 定义 为 恒 等 算 子 ， 即 Aoat = ai. 那么 (1.7) 对 所 有 
的 7 > 0 都 成 立 . 当然 , 如 果 ao,…,an 是 一 个 有 穷 数列 , 那么 + 的 可 变性 是 有 限 
的 . 

一 旦 注意 到 对 任意 一 对 数列 {at} 和 {ci} 有 一 个 奇特 的 互 反 性 关系 , 就 可 以 避 
免 许多 元 长 的 计算 ; 利用 这 个 关系 , 我 们 能 用 来 表示 差分 Arai, 反之 亦 然 .为 
了 推导 这 个 关系 , 用 (© )= 乘 (10.7)， 并 对 > = 0,…,v 求 和 . 可 以 求 出 outy 的 系 


数 等 于 
UN Ar pa 
S00 
NAR AT ke 
-or 人 ac 
(这 里 引进 了 新 的 求 和 指标 = 一 j. ) 最 后 的 和 等 于 A"-;cj,， 于 是 我 们 得 到 了 
一 般 的 互 反 公式 


2 人 (: Xe -Pel )C 1TD*-7Av-icj， (1.8) 


例 (e) ( 反 演 公式 .) 考虑 一 个 对 所 有 的 i 都 有 ai = 1 的 常数 序列 . 于 是 , Aoai = 
但 所 有 其 他 的 差分 等 于 零 , 因而 (1.8) 化 成 


co = 0 )C 1)"-iAv-ic;. (1.9) 


如 果 把 数列 {cj} 换 成 {ck+j}, 我 们 看 出 , 把 co 和 cj 分 别 换 为 ce 和 ck+4; 后 (1.9) 
仍然 成 立 , 从 而 (1.9) 是 以 其 差分 表示 给 定数 列 的 反 演 公 式 . 这 里 v 可 以 任意 选择 . 
例 (f) 设 0<9<1 是 固定 的 , 并 定义 cr = 0", 那么 
Asc = 60"(1— 0)*)(—1)*, 
从 而 (1.8) 化 为 
bg 人 Arai = Ds Oa —0)"i. (L10) w 
我 们 常常 研究 项 为 ok = u(z + kh) 的 数列 ， 这 些 项 是 通过 固定 一 点 x 和 一 个 
步 长 h > 0 而 得 到 的 . 于 是 , 由 于 明显 的 理由 把 差分 算 子 A 换 为 差 商人 =j 1IA 将 


是 很 方便 的 . 因此 ， 
全 xz) = [ez + h) — uo)]/h, (1.11) 
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更 一 般 地 ， 
人 = php-—r 了 TY_1Yr-: 
全 wa) =h 20) Diu(z + jh). 
特别 地 ， 人 wo) = u(z). 


7.2 ” 伯 因 斯 坦 多 项 式 , 绝对 单调 函数 


我 们 回 到 关系 式 (1.4), 它 的 左边 是 一 个 多 项 式 , 我 们 称 之 为 相应 于 给 定 的 函 
数 4 的 nn 次 伯 因 斯 坦 多 项 式 . 为 了 强调 这 种 依赖 性 , 我 们 用 Bn, 来 表示 它 . 于 是 


ER hp){ YN git — on-i 
Bn,u(0) = u(jh) (ea lid (2.1) 
其 中 为 方便 起 见 , 我 们 令 n-! = h. 与 (1.10) 比较 , 我 们 看 出 ，Bnw 可 以 写成 另 一 
种 形式 
Bl0) = 5 的 (Ab)rAru(0)， 六 = 工 (2.2) 
A h n 


由 伯 因 斯 坦 多 项 式 的 表达 式 (2.1) 和 (2.2) 是 等 价 的 这 个 事实 ,可 以 做 出 许多 
深刻 的 结论 . 在 作 这 方面 的 叙述 之 前 , 我 们 重新 叙述 一 下 7.1 节 例 (a) 中 导出 的 结 
果 . 
定理 如 果 忆 在 闭 区 间 '0,1 中 是 连续 的 ,那么 伯 因 斯 坦 多 项 式 Bniw 一 至 地 赵 
于 wb). 

换 句 话说 , 对 于 给 定 的 e > 0 和 所 有 充分 大 的 n， 


IBnw(0) —u(O)| <e, 0g0g1, (2.3) 
著名 的 几 尔 斯 特 拉 斯 (Weiestrass) 通 近 定理 保证 了 用 菜 些 多 项 式 一 致 逼近 的 可 能 
性 . 本 定理 更 深刻 , 因为 它 指出 了 通 近 多 项 式 . 上 面 的 证 明 应 归功 于 S. 伯 因 斯 坦 . 
作为 伯 因 斯 坦 多 项 式 的 两 种 表达 式 的 第 一 个 应 用 ， 我 们 来 推导 下 列 可 以 用 具 
有 正 系数 的 短 级 数 来 表示 的 函数 的 一 种 特征 : 
uz)=po+pT+p27 + pi>0, 0O<r<l. (2.4) 
显然 , 这 样 的 函数 的 各 阶 导 数 都 存在 , 并 且 
u(r) 20 0<z<1. (2.5) 


在 分 析 中 的 许多 场合 ， 重 要 的 是 其 道 也 成 立 ,， 即 任 一 满足 性 质 (2.5) 的 函数 都 有 一 
个 等 级 数 表达 式 (2.4)， 伯 因 斯 坦 首先 注意 到 了 这 个 问题 ,但 通常 的 证 明 既 不 简单 
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又 不 直观 . 我 们 将 说 明 , 伯 因 斯 坦 多 项 式 的 表达 式 (2.2) 可 导致 一 个 简单 的 证 明和 
一 个 有 用 的 结果 , 这 个 结果 是 , 性 质 (2.4) 和 (2.5) 等 价 另外 一 个 性 质 , 即 


Nue(0) > 0 k=00 nl he (2.6) 


这 些 结果 对 概率 论 很 有 意义 ,因为 如 果 {pr} 是 正 整数 上 的 一 个 概率 分 布 ， 那 
么 (2.4) 确定 了 它 的 母 函 数 ( 见 第 1 卷 第 11 章 ), 因而 我 们 正在 讨论 的 是 刻画 概率 母 
函数 的 特征 的 问题 : 在 我 们 的 函数 中 , 可 以 用 明显 的 正规 化 条 件 u(1) = 1 来 辨别 它 
们 . 但 是 , 例子 u(z) = (1 一 z)-:! 说 明 , 具有 级 数 表达 式 (2.4) 的 函数 不 一 定 是 有 界 
的 . 
定理 2 对 于 定义 在 0< z < 1 上 的 连续 函数 4, 3 个 性 质 (2.4)、(2.5) 和 (2.6) 是 
完全 等 价 的 ， 

称 具有 这 种 性 质 的 函数 为 0,1 中 的 绝对 单调 夯 数 . 
证 我们 分 两 步 进 行 , 首先 只 考虑 概率 母 函数 . 换 句 话说 , 我 们 现在 假设 在 闭 区 
间 0,7 中 是 连续 的 , 而 且 wu(1) =1. 

显然 ，(2.4) 蕴含 (2.5). 如 果 (2.5) 成 立 , 那么 u 以 及 它 的 各 阶 导数 都 是 单调 
的 . 4 的 单调 性 蕴含 AW?)>0, 而 必 的 单调 性 蕴含 人 Au(?) 单调 地 依赖 于 z, 因此 
全 wz) > 0. 由 归纳 法 知 ，(2.5) 草 含 (2.6), 而 且 蕴 含 Aru(z) > 0. 

假设 (2.6) 对 上 = 0,…,n 成 立 . 由 (2.2), 多 项 式 Bn 的 系数 是 非 负 的 , 并且 
(2.1) 说 明 Bnu(1) = 1. 因此 ，Bnw 是 一 个 概率 母 函数 , 第 1 卷 第 11 章 (或 下 面 的 
8.6 节 ) 的 连续 性 定理 保证 Bn,w 的 极限 4 是 一 个 概率 母 函 数 ，( 假 设 u(1) = 1 保证 
系数 相 加 等 于 1. ) 这 就 完成 了 对 有 和 界 函 数 的 证 明 . 

如 果 4 在 1 附近 是 无 界 的 , 那么 我 们 令 


oa-v( lz) 人 (2 )， 0<z<1l， (2.7) 


其 中 m 是 任意 整数 . 上 述 的 证 明 适 用 于 w 并 且说 明了 性 质 (2.5) 和 (2.6) 的 每 一 个 
都 列 含 敌 级 数 展开 式 (2.4) 至 少 对 0 < z < (m 一 1)/m 成 立 . 由 于 等 级 数 表达 式 的 
唯一 性 和 m 的 任意 性 , 这 蕴含 (2.4) 对 0< z <1 成立. p 


7.3 矩 问题 


在 上 节 最 后 一 个 定理 中 我 们 遇 到 了 各 阶 的 差分 均 为 正 的 数列 {ak}. 在 本 节 中 ， 
我 们 将 讨论 一 类 有 关 的 数列 , 它们 的 差分 的 符号 是 交替 的 , 即使 得 


(D'Arck >0, r=0,1,.… (3.1) 
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的 数列 {ce}. 我 们 称 这 样 的 数列 为 完全 单调 的 数列 . 
设 王 是 0,1 中 的 一 个 概率 分 布 , 并 用 E(u) 表示 4 关于 F 的 积分 . 我 们 把 下 
的 上 阶 答 定义 为 
ck =E(X*)= / zrF{dz}, (3.2) 
我 们 认为 积分 区 间 是 闭 的 . 
求 逐 次 差分 , 我 们 得 到 


(D'Arc = E(X*(1 — X)"*), (3.3) 


因此 逢 数列 {cx} 是 完全 单调 的 . 现在 设 飞 是 0,1 中 的 任 一 连续 函数 ， 并 把 伯 因 斯 
坦 (Bernstein) 多 项 式 Bn 的 表达 式 (2.1) 关于 下 积分 . 由 (3.3), 我 们 得 到 


BBn) = Dat) (A = Du), = 3) 


i=0 i=0 


其 中 , 为 了 简略 起 见 ,我 们 设 
m= 0) Cyan (8.5) 


对 于 v(z) = 1 这 一 特殊 的 选择 , 我 们 有 Bnwu(z) = 1 对 所 有 的 > 成 立 , 因而 pf”) 相 
加 后 等 于 1. 这 表示 , 对 于 每 个 np 定义 了 一 个 对 点 家 二 j/n 赋予 重量 PM 的 概 
让 分 布 (这 里 j= 0,…,nn). 我 们 用 及 表示 这 个 概率 分 布 ， 用 En 表示 关于 它 的 其 
望 : 于 是 (3.4) 化 成 En(u) = E(Bnu). 由 于 Bu 一 4 是 一 臻 的, 所 以 


En(u) 一 E(wW. (3.6) 


到 现在 为 止 , {cx} 是 相应 于 一 个 给 定 分 布 F 的 矩 数 列 . 但 是 , 我 们 可 以 从 任 一 
完全 单调 数列 {ck} 出 发 , 再 用 (3.5) 定义 ph”. 由 定义 , 这 些 量 是 非 负 的 , 我 们 着 手 
来 证 明 它们 的 和 等 于 co. 实际 上 , 根据 基本 的 互 反 公式 (1.8)， 


(om) Nene 
Bron Po) Kul0). (3.7) 


对 于 常 值 函 数 v = 1, 右边 化 为 ,这 就 证 明了 断言 

因此 , 我 们 看 到 , 服从 正规 化 条 件 co = 1 的 任 一 完全 单调 数列 {ck} 都 定义 一 
个 概率 分 布 {p4”},w 关 于 它 的 期 望 En(w) 由 (3.7) 给 出 . 看 一 看 当 n 一 co 时 发 生 
什么 情况 是 很 有 趣 的 . 为 了 简单 起 见 , 设 4 是 一 个 N 次 多 项 式 . 因为 无 = 1/n, 所 
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以 不 难看 出 会 v(0) 一 wn)(0). 此 外 , na -DO 一 r+Dir 一 1 (3.7) 中 右边 的 
级 数 至 多 包含 N + 1 项 , 因此 我 们 知道 , 对 于 每 个 N 次 多 项 式 , 当 n 一 oo 时 


N 
En(u) 一 ud (0). (3.8) 


r=0 
特别 地 ， 当 v(z) = z" 时 , 我 们 得 到 
En(X") — cr. (3.9) 


换 句 话说 , 概率 分 布 F 的 7 阶 算 越 于 cr. 因此 , 似乎 应 该 存在 一 个 > 阶 矩 和 cr 重 
合 的 概率 分 布 F. 我 们 把 这 令 述 为 : 

定理 1 一 个 概率 分 布 的 起 cr 构成 一 个 满足 co = 1 的 完全 单调 数列 . 反之 , 服从 
正规 化 条 件 co = 1 的 任 一 完全 单调 数列 {ck} 与 唯一 的 一 个 概率 分 布 的 矩 数列 重 


合 


这 个 结果 应 归功 于 豪 斯 多 夫 (Hausdorf), 这 是 一 个 深刻 而 又 强 有 力 的 结果 , 泛 
函 分 析 的 系统 应 用 逐渐 导致 了 简单 的 证 明 ， 但 是 即使 最 好 的 纯 分 析 证 明 也 是 相当 
复杂 的 . 这 里 的 处 理 方法 是 新 的 ， 它 说 明 概率 论 的 方法 可 以 简化 复杂 的 分 析 论证 ， 
并 使 其 变 得 更 加 直观 . 我 们 不 仅 要 证 明 这 个 定理 , 而 且 还 要 给 出 的 明显 表达 式 . 

我 们 由 (3.8) 知道 , 对 于 任意 的 多 项 式 4, 期望 En(u) 收敛 于 一 个 有 穷 的 极限 ， 
由 一 臻 带 近 定理 (2.3) 可 以 推出 , 对 任何 在 0,1 中 连续 的 函数 都 有 同样 的 结论 成 
立 . 我 们 用 E(u) 表示 En(u) 的 极限 . 那么 关系 式 (3.6) 在 任何 情况 下 都 成 立 , 但 是 
如 果 从 任 一 完全 单调 数列 {ck} 出 发 , 我们 必须 证 明 , ?存在 这 样 一 个 概率 分 布 ， 
使 得 极限 E(w) 与 4 关于 的 期 望 重合 . 

对 于 给 定 的 0 < t < 1 和 e > 0, 用 ww。 表示 定义 在 0,1 上 的 下 列 连续 函 
数 , 当 z > t+ 时 它 等 于 0, 当 z <t 时 它 等 于 1, 而 在 t 和 t+e 之 间 它 是 线性 
的 . 设 U.(t) = (use). 如 果 t < 7， 那么 显然 有 usecu,.， 差 ure -ue 的 最 大 值 
< (7 一 t)/e 由 此 推出 , 对 固定 的 。> 0,Ue(t) 是 t 的 连续 不 减 函 数 . 此 外 ,对 于 固 
定 的 当 。 一 0 时, 值 Ue(t) 只 能 减少 , 因此 U(t) 趋 于 一 极限 , 我 们 用 F(t) 表示 
此 极限 . 这 是 一 个 从 0 变 到 1 的 不 减 函数 . 它 显 然 是 右 连 续 的 , ?但 这 是 不 重要 的 ; 
因为 在 任何 情况 下 , 改变 下 在 其 路 嘱 点 上 的 值 , 我 们 就 能 得 到 右 迷 续 性 . 

@ 我 们 可 以 在 这 里 结束 证 明 , 因为 这 个 断言 包含 在 本 书 中 别处 证 过 的 以 下 两 个 结果 的 任 一 个 之 中 . 
(a) 包含 在 5.1 节 的 里 斯 表现 定理 中 , 因为 E(u) 显然 是 一 个 范 数 为 1 的 正 线性 泛 函 . 
{b) 包含 在 8.1 节 的 基本 收敛 定理 中 . 


我 们 之 所 以 给 出 这 里 的 证 明 (部 分 地 重复 了 5.1 节 中 的 证 明 ), 是 为 了 使 本 章 自给 自足 , 也 是 为 了 推 
导 一 个 反 演 公 式 . 
@ 关于 验证 , 见 5.1 节 中 的 里 斯 表现 定理 的 证 明 - 
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对 于 概率 分 布 (3.5) 的 分 布 函数 Fa。， 由 we 的 定义 , 我 们 有 , 如 果 5 > e, 那么 
En(w-s,) < Fnlt) < En(w,e)- (3.10) 


当 一 co 时 , 两 端的 项 分 别 趋 于 Ue(t 一 6) 和 Uc(t). 如 果 t 和 t-65 都 是 下 的 连 
续 点 , 那么 令 一 0 我 们 可 以 得 到 , 数列 {Fn(t)} 的 所 有 极限 点 都 位 于 F(t 一 5) 和 
F(t) 之 间 . 最 后 , 令 5 一 0, 我 们 得 到 , 对 于 下 的 每 个 连续 点 t,Fn(t) 一 F(t). 这 个 
关系 式 可 明确 地 表示 为 


2 的 CD IA ic =» FO). (3.11) 


jnt 


对 于 7r > 1, 通过 分 部 积分 我 们 可 把 Fn 的 > 阶 甜 写成 形式 
En(Xr)=1 一 r 人/ ZlFn(z)dz. (3.12) 
0 


我 们 在 (3.9) 中 已 经 证 明了 左边 趋 于 cr, 因为 F 一 下, 所 以 这 就 证 明了 五 的 + 阶 

矩 和 cr 重合 . 这 就 完成 了 定理 1 的 证 明 . p 
注意 , 如 果 下 是 0,1 中 的 任 一 概率 分 布 函数 , 那么 (3.11) 是 用 的 矩 来 表示 

五 的 反 演 公式 . 我 们 把 这 重新 叙述 于 下 列 定理 中 . 

定理 2 对 于 定理 1 的 概率 分 布 已 ， 极 限 公 式 (3.11) 在 每 一 个 连续 点 上 都 成 立 . 


为 了 避免 误解 ,应 当 指出 ， 对 于 不 集中 在 某 个 有 限 区 间 上 的 分 布 , 情况 是 完全 不 同 的 . 
事实 上 , 一 般 说 来 分布 不 是 由 它 的 起 唯一 确定 的 . 
例 对 数 正 态 分 布 不 由 它 的 短 确 定 . 称 正 变量 X 服从 对 数 正 态 分 布 , 如 果 InX 服从 正 态 
分 布 . 对 于 标准 正 态 分 布 , X 的 密度 为 


Ha) = se-$tn), 2>0, 


Van 
并 且 对 于 z < 0,f(z) =0. 对 于 -1<a<l, 设 
fa(z) = f(z)[1 + asin(2x ln z)]. (3.13) 
我 们 断言 ，f。 是 一 个 与 f 有 完全 相同 的 矩 的 概率 密度 . 因为 f。 > 0, 所 以 只 需 证 明 


sso) sin(orins)de =0, 0i 
|, 


代 换 nz = t=y+k, 把 上 面 的 积分 化 成 
+ 


A 上 edemain(ant)dt= 去 / 4 sin(2ny)ay, 
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因为 被 积 函数 是 一 个 奇 函 数 ， 所 以 最 后 这 个 积分 等 于 0。( 这 个 有 趣 的 例子 应 归功 于 海 得 
(Heyde). ) > 

不 应 当 由 于 这 个 否定 性 结果 而 过 度 翡 观 , 因为 适当 的 正则 性 条 件 可 以 消除 产生 这 种 困 
难 的 根源 . 最 好 的 结果 是 卡 莱 曼 (Carleman) 定理 . 这 个 定理 说 明 , 如 果 


De, (3.14) 


即 如 果 左 边 的 级 数 发 散 , 那么 定义 在 55;55 上 的 分 布 由 它 的 起 叭 一 确定 . 在 本 书 中 , 我 
们 将 只 证 明 一 个 较 弱 的 结果 ， 即 当 香 级 数 并 jont"/(2n)! 在 某 个 区 间 中 收敛 时 ，F 由 它 的 
和 矩 唯一 确定 .(7.6 节 和 15.4 节 . ) 两 个 准则 都 对 jn 的 增加 速度 加 了 限制 . 即使 在 最 一 般 的 
情况 下 , 我 们 也 可 以 根据 有 限 多 个 矩 uo,ja，…,An 的 知识 来 推导 一 些 关 于 FF 的 有 用 的 不 
等 式 , 这 些 不 等 式 与 在 5.7 节 中 根据 jo, ja 导出 的 不 等 式 类 似 . 了 
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我 们 着 手 推 导 一 个 (应 归功 于 德 . 非 内 蒂 ) 漂亮 结果 , 它 可 以 作为 能 很 容易 地 
从 7.3 节 定理 1 推出 的 出 人 意料 的 结果 的 典型 例子 . 
定义 “ 称 随 机 变量 X1,.…, Xn 是 可 交换 的 ,如果 nl 种 置换 (Xk，，…， Xks) 有 相同 
的 n 维 概率 分 布 ; 称 无 穷 序列 {Xn} 的 变量 是 可 交换 的 ,如 果 对 每 个 n,X1，X2，:…， Xn 
是 可 交换 的 . 

下 列 例子 将 说 明 ， 在 有 穷 序 列 和 无 穷 序 列 之 间 有 本 质 的 差别 ， 我 们 这 里 考虑 
只 取 值 0 和 1 的 可 交换 变量 无 究 序列 {Xn} 的 特殊 情形 . 下 一 个 定理 断言 . 这 样 一 
个 过 程 {Xn} 的 分 布 可 以 通过 把 二 项 分 布 随机 化 得 到 . 与 通常 一 样 ,我 们 设 5。 = 
Xi 十 … 十 Xn, 把 事件 {Xk = 1} 解释 为 成 功 . 
定理 ”对 于 每 一 个 由 只 取 值 0 和 1 的 可 交换 变量 zn 组 成 的 无 穷 序列 ， 有 一 个 相 
应 的 集中 于 了 ,了 上 的 概率 分 布 ,使 得 


1 
PU be Nl Ken -0 X=0}= / bx(L 一 bj"-kPfdgj， (4.1) 
0 


@ 最 初 的 比较 深刻 的 结果 是 马尔 可 夫 和 斯 蒂 尔 切 斯 大 约 在 1884 年 得 到 的 . 最 近 关 于 这 个 问题 的 文 走 
非常 多 ， 例 如 见 A. Wald, Trans. Amer. Math. Soc., vol. 46 (1939) pp.280-306; H. L. 
Royden, Ann. Math. Statist., vol. 24(1953) pp.361-376 [给 出 了 F(z) - F(z) 的 界 ]. 关于 
综述 ， 见 索 哈 特 (J. A. Shohat) 和 塔 马 金 (J. D. Tamarkin) 的 专著 : The problem of moments, 
New York, 1943(Math Surveys, No.1). 又 见 S. Karlin and W. Studden (1966). 

* 后 面 用 不 到 本 节 的 内 容 . 

@ 有 时 也 用 “对 称 相关 ”这 一 术语 . 
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P{Sn = 上 = 网 0*(1— 0)"—*F{d0}. (4.2) 


证 为 了 简洁 起 见 , 用 pkn 表示 (4.1) 的 左边 (其 中 0<k<n). 令 co=1, 对 于 
n=12,.…, 令 


cn = Pnin =P{Xi =1,.…, Xn = 1}. (4.3) 
于 是 由 概率 意义 有 
Pn-ln = Pn—ln-1 — Pnn = —Acn-1, (4.4) 
因此 
pn-2n = Pn-2,n-1 — Pn—ln = A?cn_2. (4.5) 


按 这 种 方式 继续 下 去 , 我 们 得 到 , 对 于 上 < m， 


Phkn = Pkn—1 一 Dk+ln = (~—1)" tA" Ke. (4.6) 


所 有 这 些 基 者 是 非 负 的 ， 因 而 序列 {c] 是 完全 单调 的 . 由 此 推出 ，cr 是 一 个 概率 分 
布 忆 的 阶 皂 , 因此 (4.1) 只 不 过 是 关系 式 (4.6) 的 另 一 种 形式 . 断言 (4.2) 已 包含 
在 它 里面 了 ,因为 在 n 次 试验 中 发 生 次 成 功 的 方式 有 (”) 种 > 


推广 ”不 难 把 同样 的 论证 应 用 到 可 取 3 个 值 的 变量 上 , 但 是 那样 的 话 就 有 2 个 自 
由 参数 , 代替 (4.2), 我 们 得 到 三 项 分 布 与 一 个 二 元 分 布 的 混合 . 更 一 般 地 , 这 个 
定理 及 其 证 明 也 适用 于 只 取 有 限 个 值 的 随机 变量 ,这 个 事实 自然 会 导致 下 列 猜想 ， 
最 一 般 的 对 称 相关 序列 {X;} 可 以 通过 把 某 一 独立 变量 序列 的 一 个 参数 随机 化 得 
到 , 个 别 情形 是 不 难 解决 的 , 但 是 一 般 的 问题 却 呈 现 出 了 其 固有 的 困难 ， 即 “参数 ” 
不 是 完全 确定 的 , 可 以 以 任意 的 方式 选取 . 尽管 如 此 , 还 是 有 人 在 相当 一 般 的 情况 
下 证 明了 这 个 定理 的 一 种 形式 . 

这 个 定理 使 把 大 数 定律 和 中 心 极限 定理 应 用 于 可 交换 变量 这 件 事 成 为 可 能 的 
了 . ( 见 8.10 节 中 的 习题 21. ) 

下 列 例 子 将 说 明 , 在 个 别 情况 下 , 这 个 定理 可 以 导致 出 人 意料 的 结果 . 其 他 的 
例子 将 说 明 这 个 定理 不 适用 于 有 限 序列 . 
例 (a) 在 第 1 卷 5.2 节 的 波 利 亚 境 子 模型 中 , 钠 子 最 初 装 有 5 个 黑 球 和 "个 红 
球 . 每 次 取出 一 个 球 后 , 把 取出 的 球 放 回 , 并 把 c 个 与 取出 的 球 颜色 相同 的 球 加 入 

@ E. Hewitt and L. J. Savage, Symmetric measures on Cartesian products, Trans. Amer. 

Math.。Soc., vol，80(1956) pp.470-501， 在 洛 埃 韦 1963) 中 可 以 找到 利用 黄 对 这 个 问题 所 做 


的 讨论 . 又 见 H. Biihimann, Austauchbare Stochastiche Variabeln und ihre Grenzwertsitze, 
Univ. of California Publications in Statistics, vol. 3, No. 1(1960), pp.1-36. 
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铅 子 中 . 因此 , 在 前 n 次 取 球 时 都 取得 黑 球 的 概率 等 于 


ca = +00+ (no a 
G+7) (b+r+(n— 1)e) (rn)r() 


(47) 


根据 第 n 次 取 球 时 取得 的 是 黑 球 或 红 球 , 令 Xe = 1 或 0. 第 1 卷 5.2 节 中 的 简 
单 计算 表明 , 这 些 变量 是 可 交换 的 ， 因 此 ca 表示 一 个 分 布 的 n 阶 矩 . (4.7) 的 形 
式 使 我 们 想起 了 2.2 节 (2.5) 8 积分 . 观察 表明 ,，F 是 带 有 参数 =b/c 和 二 r/c 的 
2.4 节 (4.2) 8 分 布 . 再 利用 8 积 分 , 可 以 看 出 , (41) 与 第 1 卷 52 节 (2.3) 一 致 , (42) 
与 第 1 卷 5.2 节 (2.4) 一 致 . 

例 (b) 考虑 2 个 球 在 3 个 盒子 中 的 6 种 可 辩 别 的 分 布 ， 并 对 每 种 分布 赋 于 概率 
-根据 第 ;个 盒子 中 有 球 或 无 球 , 令 X 等 于 1 或 0. 变量 是 可 交换 的 ， 但 定理 不 
适用 . 实际 上 , 由 (4.3) 我 们 可 得 @ = 1,01 = 二 ,0 = 吉 3=0,， 序 列 到 此 停止 如 
果 它 是 一 个 完全 单调 序列 {cm} 的 初始 部 分 , 那么 我 们 应 有 c4 = cs = … = 0. 但 
是 ,这 样 就 有 Atc = -3 <0, 这 与 {cn} 是 完全 单调 序列 相 下 盾 . 

例 (c)” 设 和 X，…,Xn 是 独立 同 分 布 的 ,并 令 Sn = Xi 十 … 十 Xn， 对 于 大 一 
2 一 二 令 玉 二 Xk 一 n-15。. 变量 8, 丈 -1) 是 可 交换 的 ,但 它们 的 联 
合 分 布 不 具有 德 : 非 内 蒂 (de Finetti) 定理 指出 的 那 种 形式 > 


“7.5 广义 素 勒 公式 与 半 属 


前 面 3 节 讨论 了 涉及 二 项 分 布 的 7.1 节 例 (a) 中 的 极限 关系 式 的 推论 . 现在 我 
们 来 讨论 涉及 泊 松 分 布 的 7.1 节 例 (b). 因为 这 个 分 布 是 二 项 分 布 的 一 个 极限 形式 ， 
所 以 我 们 可 以 希望 ， 我 们 对 伯 因 斯 坦 多 项 式 的 简单 处 理 方法 可 以 推广 到 目前 的 情 
形 . 这 种 处 理 方法 的 起 点 是 恒等式 (1.10), 二 项 分 布 出 现在 此 式 的 右边 . 如 果 我 们 令 
9 = z/u， 并 让 v 一 oo, 那么 这 个 二 项 分 布 就 趋 于 期 望 为 z 的 泊 松 分 布 ，(1.10) 变 
成 2 


> Ara = Fos (5.1) 
r=0 j=0 
对 i= 0,a; = u(jh), 我 们 利用 这 个 恒等式 , 其 中 是 而 o56 上 的 任 一 有 界 连续 


* 初 读 时 可 以 略 去 本 节 、 
@ 为 了 直接 证 明 恒 等 式 (5.1)， 只 需 用 定义 表达 式 (1.7) 代替 Arai 就 行 了 . 这 样 左边 变 为 一 个 二 重 
和 , 右边 可 通过 它 的 项 的 明显 的 重新 排列 得 到 - 
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函数 , h 是 一 个 正常 数 . 令 z = h6, 关系 式 (5.1) 变 为 
于 拖 ru = Dem. (5.2) 
各 各 


右边 是 关于 泊 松 分 布 的 期 望 , 由 例 1(b) 知道 它 趋 于 wu(0). 为 了 以 更 自然 的 方式 
表示 这 个 结果 , 我 们 把 v(b) 换 为 u(9 + 妨 , 其 中 上 > 0 是 任意 的 . 因此 我 们 证 明了 : 
定理 ”对 于 而 00 上 的 任 一 有 界 连 续 函 数 4， 


立 5 Sult) = u(t+0). (5.3) 
r=0 


这 了 0 > 0,h 一 0+. 

这 是 一 个 极其 吸引 人 的 定理 , 希 尔 (Hille) 首先 用 较 高 深 的 方法 给 出 了 证 明 . 左 
边 是 4 的 泰勒 展开 式 , 只 是 这 里 把 导数 换 成 了 差 商 . 对 于 解析 函数 , 左边 趋 近 于 泰 
勒 级 数 , 但 是 此 定理 也 适用 于 不 可 微 函 数 . 在 这 种 意义 下 , (5.3) 是 泰勒 展开 式 的 推 
广 , 并 揭示 了 它 的 本 质 的 新 的 方面 . 

还 可 以 用 另外 一 种 方法 考察 (5.3), 这 种 方法 将 导致 所 谓 的 半 群 理论 的 指数 公 
式 ( 见 10.9 节 的 定理 2)，(5.3) 的 左边 包含 一 个 形式 上 的 指数 级 数 , 用 它 来 定义 一 
个 算 子 exp9 人 是 很 自然 的 . 这 样 关系 式 (5.3) 可 以 简写 为 l 


exp 9AuGd = ult+0). (5.4) 


为 了 更 一 致 地 用 算 子 来 记 上 式 , 我 们 引进 一 个 平移 算 子 3T(0), 它 把 以 变 成 由 uolt) = 
u(t 十 9) 定义 的 函数 uo. 于 是 T(0) = 1 是 恒 等 算 子 , 并 且 


A= h-1[T(h) — 1]. (5.5) 
利用 算 子 的 语言 ，(5.3) 现在 变 为 


eeh-1TO 一 T(0). (5.6) 


@ 应 当 注意 , 如 果 9 和 户 是 负 的 , + 是 定义 在 全 直线 上 的 , 那么 这 里 的 论证 仍然 成 立 . 

@ 这 是 E. Hills and R. S. Phillips, Functional analysis and semi-groups，AMS Colloquium 
Publications，vol，31(1957) p。 314 中 (在 稍微 更 一 般 的 情形 下 ) 给 出 的 证 明 ， 此 证 明 应 归功 于 
里 斯 ,不 用 说 ,作者 们 不 认为 把 线性 插值 (5.7) 当 作 半 群 参 数 的 洒 松 随机 化 是 有 用 的 ， 也 不 认为 把 
切 比 雪夫 多 项 式 看 成 是 当然 成 立会 有 什么 用 处 ， 肯 达尔 注意 到 了 它 的 概率 含义 , 在 K. L. Chung, 
On the ezponential formulas of semi-group theory, Math Scandinavica, vol. 10(1962) pp. 
153-162 一 文中 充分 地 利用 了 它 的 概率 含义 . 
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这 个 公式 所 包含 的 主要 信息 是 , 整个 算 子 族 了 (9) 由 了 T(h)( 关 于 很 小 的 六 的 性 质 所 
确定 . 

回顾 一 下 可 以 看 出 , 我 们 对 (5.6) 的 推导 显然 适用 于 更 一 般 的 算 子 族 ，(5.2) 的 
右边 只 是 的 值 的 一 个 线性 组 合 , 可 以 看 作 是 w 的 插值 公式 . 类 似 的 插值 表达 式 对 
于 定义 在 9 > 0 上 的 每 个 算 子 族 {T(9)} 都 有 意义 . 实际 上 , 对 于 固定 的 9 和 > 0， 
算 子 


oo 大 站 
An(0) 一 eeh-1 站 (© T(kh) (5.7) 


是 算 子 T(kh) 的 一 个 加 权 线 性 组 合 . 权 由 泊 松 分 布 给 出 , 并 且 当 h 一 0 时, 9 的 一 
个 邻 域 占 优势 , 其 余部 分 的 权 趋 于 0. 因此 , 似乎 应 有 下 面 的 结论 成 立 : 利用 收敛 性 
和 连续 性 的 任意 的 合理 概念 ， 对 于 任 一 连续 算 子 族 T(9), 我 们 应 有 An(0) 一 T(6). 
特别 地 ， 如 果 算 子 T(9) 构成 一 个 半 群 ， 那么 我 们 有 T(kh) = (T(h))*， 插 值 算 子 
An(9) 与 (5.6) 左边 出 现 的 算 子 相同 . 因此 ,“ 指 数 公式 "(5.6) 一 般 说 来 对 有 界 算 子 的 
连续 半 群 成 立 这 件 事 不 是 出 人 意料 的 . 我 们 将 在 10.9 节 中 再 来 讨论 这 个 证 明 . 


7.6 ” 拉 普 拉 斯 变换 的 反 演 公 式 


7.5 节 和 7.1 节 例 (b) 是 以 下 面 的 大 数 定律 的 一 个 特殊 情形 为 基础 的 ， 如果 
六 是 一 个 随机 变量 ， 且 服从 期 望 为 9 的 泊 松 分 布 ， 那 么 对 于 充分 大 的 A， 事 件 
|X 一 39| > Xe 的 概率 很 小 . 因此 , 对 于 P{X < Xz}, 我 们 得 到 , 当 入 一 oo 时， 


D> C0 - 0， 如 果 9>z， 


KR 于 1， 如 果 0 < z. (3 


左边 的 表达 式 是 (5.2) 在 uw 只 取 值 0 和 1 时 的 一 个 特殊 情形 ,因而 (6.1) 包含 在 上 
节 的 定理 中 . 我 们 现在 用 对 拉 普 拉 斯 变换 的 应 用 来 说 明 这 个 公式 在 分 析 中 的 用 途 ， 
拉 普 拉 斯 变换 这 个 课题 将 在 第 13 章 中 系统 地 讨论 . 


设 刁 是 一 个 集中 在 0 co 上 的 概率 分 布 . 天 的 拉 普 拉 斯 变换 是 一 个 定义 在 和 > 0 
上 的 如 下 的 函数 yp: 


人 一 6 
ep(A) = 人/ e-*9 pF{d0}. (6.2) 
导数 p(9 存在 , 且 可 通过 形式 微分 得 到 : 


(-D*ep((A) = / 让 egr pF{d0}. (6.3) 
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由 这 个 恒等式 和 (6.1) 可 以 看 出 , 在 下 的 每 个 连续 点 上 ， 
> pW0) — F(z). (6.4) 
大 和》Xz 


这 是 一 个 非常 有 用 的 反 演 公式 . 特别 地 ， 它 说 明 分 布 FF 由 它 的 拉 普 拉 斯 变换 唯一 
确定 ， 

同样 的 论证 可 导致 很 多 与 上 述 公 式 有 关 的 反 演 公 式 , 这 些 公 式 可 应 用 于 各 种 
各 样 的 情况 . 事实 上 , (1.6) 是 具有 下 列 形式 的 拉 普 拉 斯 积分 的 一 个 反 演 公式 : 


au = 人/ “exzulzjdz. (6.5) 


与 在 (6.3) 中 一 样 ， 可 以 进行 形式 微分 . (1.6) 说 明 ,， 如果 u 是 一 有 界 连 续 画 数 ， 那 
么 在 每 个 有 限 区 间 中 一 致 地 有 
Te (3) wd(n/0) 一 ug (6.6) 
[这 些 反 演 公式 在 更 广泛 的 条 件 下 也 成 立 , 但 是 在 这 个 时 候 让 新 的 术语 掩盖 论 
证 的 简明 性 是 不 太 好 的 . (6.6) 的 一 种 抽象 形式 将 出 现在 13.9 节 中 . ] 
如 果 分 布 尺 具 有 矩 jv1,…, pan, 那么 它 的 拉 普 拉 斯 变换 满足 不 等 式 


2n-1 


1)k Xk LL 和 
并 ( Dp < < HE Dp . (6.7) 
k=0 k=0 


这 是 一 个 常用 的 不 等 式 . 为 了 验证 上 式 , 我 们 从 下 列 著 名 的 不 等 式 ? 出 发 : 
A ea 1) 
3 全 Co 1 


k=0. 


把 t 换 为 并 并 关于 下 积分 , 就 可 得 到 (6.7). 特别 由 此 推出 , 在 使 下 式 右 边 的 级 数 
收敛 的 任 一 区 间 0 和 入 < 和 中 ， 


oo (1k Ak 
oO= 和 Ce (6.9) 
k=0 


kik 
0 (6.8) 


由 解析 函数 论 知道 , 在 这 个 情形 下 , 对 于 所 有 的 和 > 0, (6.9) 中 的 级 数 唯一 地 确定 
了 wp( 和 ). 因此 , 当 (6.9) 中 的 级 数 在 某 一 区 间 | 和 | < Xo 中 收 伍 的 时 候 ， 起 ji1, 42，……… 
唯一 地 确定 了 分 布 下 . 这 个 有 用 的 准则 对 于 不 集中 在 下 cs 上 的 分 布 也 成 立 , 但 是 
证 明 要 用 到 特征 函数 ( 见 15.4 节 ). 


@ 根据 归纳 法 , 由 简单 的 微分 可 证 明 (6.8) 中 任意 两 项 之 差 是 t 的 单调 函数 . 
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*7.7 ” 同 分 布 变量 的 大 数 定律 


在 本 节 中 , 我 们 利用 记号 Sn = XX 二.… 十 Xn. 大 数 定律 的 最 古老 的 形式 是 指 ， 
如 果 Xi 独立 , 且 具 有 期 望 为 几 , 方差 为 有 限 的 共同 分 布 , 那么 9 对 于 固定 的 e> 0， 
当 n 一 oo 时 ， 

P{ln-15Sn — pl > e} — 0. (7.1) 
本 章 是 从 下 列 陈述 开始 的 : (7.1) 包含 在 切 比 雪夫 不 等 式 中 . 为 了 得 到 更 深刻 的 结 
果 , 我 们 来 推导 一 个 即使 在 期 望 不 存在 时 也 可 应 用 的 切 比 雪夫 不 等 式 的 变形 . 根据 
X4 在 任意 固定 的 水 平 土 ss 上 的 截 尾 来 定义 新 的 随机 变量 Xk. 于 是 


< 
双 = { Ps sn, (72) 


0, |\Xk| > sn- 
令 
So 一 人 十 十 om = E(Sn)=nE(X), (7.3) 
那么 很 明显 ， 
P{lSn 一 mp| > 匡 科 PflSn 一 ma > 十 十 P{Sn # Sn}. (7.4) 


因为 只 有 当 右 边 的 事件 之 一 发 生 时 , 左边 的 事件 才 可 能 发 生 . 

这 个 不 等 式 对 于 具有 不 同 分 布 的 相依 变量 也 成 立 , 但 是 我 们 这 里 只 对 同 分 布 
的 独立 变量 感 兴趣 . 令 t= nz 并 对 右边 第 一 项 应 用 切 比 雪夫 不 等 式 , 由 (7.4) 我 们 
可 得 到 下 列 的 
引 理 设 Xi 是 具有 共同 分 布 下 的 独立 变量 . 那么 对 工 > 0， 


1 w 
P 人 —E(X!) 


> 了 < 二 5ECXG) +nP{PG| > on}. (75) 

作为 一 个 应 用 , 我 们 可 以 推导 辛 钦 大 数 定律 ， 辛 钦 大 数 定律 是 说 , 当 Xk 具有 
有 限期 望 py 时 , (7.1) 对 所 有 的 e > 0 成 立 . 它 的 证 明 在 本 质 上 是 第 1 卷 10.2 节 中 
给 出 的 离散 情形 的 证 明 的 重复 . 因此 , 我 们 来 直接 讨论 一 个 包含 充 要 条 件 的 更 强 的 
形式 . 为 了 用 公式 表述 它 , 对 上 > 0, 我 们 令 


T(t) = [1 — F(t) + F(-)]t, (7.6) 


* 本 节 的 课题 与 最 古老 的 概率 论 有 关 , 但 在 本 书 的 其 余部 分 中 没有 什么 特别 的 重要 性 , 之 所 以 叙述 它 
们 ,是 由 于 它们 的 历史 意义 和 方法 论 的 意义 也 是 因为 有 许多 论文 专门 讨论 大 数 定律 的 部 分 逆 . 
@ (7.1) 等 价 于 n-1Sn 一 上 -全 0, 其 中 了 表示 “ 依 概 率 趋 于 ”. ( 见 8.2 节 .) 
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t t 

od) = : 人 ,dz} 一 一 7 的 十 是 / zr(z)dz. (7.7) 
(这 两 个 表达 式 相等 可 通过 分 部 积分 得 到 . ) 
定理 1 广义 弱 大 数 定律 . 设 Xk 是 具有 共同 分 布 的 独立 变量 . 为 使 存在 这 样 的 
常数 hn， 使 得 对 每 个 ec > 0 有 


Pfln-:Sn — pn| > 是 一 0， (7.8) 
当 且 仅 当 Qt 一 oo 时 T(t) 一 0. 在 这 种 情形 下 , (7.8) 对 于 


ee 人 " zp{dz} (7.9) 


成 立 . 
证 (a) 充分 性 .用 (7.9) 定义 jn. 我 们 利用 满足 s=? 的 截 尾 (7.2). 于 是 和 =E(CX1)， 
由 上 一 引 理 知 (7.8) 的 左边 < e -2c(n) + r(n)， 当 T(t) 一 0 时 ， 此 式 趋 于 0. 因此 ， 
这 个 条 件 是 充分 的 . 

(b) 必要 性 . 假设 (7.8) 成 立 . 与 在 5.5 节 中 一 样 , 我 们 引入 由 Xi 的 对 称 化 直接 
得 到 的 变量 "Xk. 它们 的 和 "5" 可 以 通过 Sn 一 ny 的 对 称 化 得 到 . 设 a 是 变量 Xk 
的 一 个 中 位 数 . 依次 利用 5.5 节 的 不 等 式 (5.6)、(5.10) 和 (5.7), 得 


2P{|Sn — np| > ne} > P{loSn| > 2ne} 
1 
> 3 —exp(—nP{PX| > 2ne})] 
1 4 
> 也 [ 一 exp (Catpal > 2ne 十 oD) 4 


由 (7.8)， 上 式 左 边 趋 于 0. 由 此 推出 , 右边 的 指数 趋 于 0, 因此 必 有 r(b) 一 0 > 
当 书 的 期 望 为 上 4 时, 条件 r(b) 一 0 是 满足 的 . 于 是 截 必 矩 ln 趋 于 人 因此， 
在 这 种 情形 下 , (7.8) 与 古典 大 数 定律 (7.1) 等 价 . 但 是 , 形 如 (7.1) 的 古典 大 数 定律 ， 
对 某 些 期 望 不 存在 的 变量 也 成 立 . 例如 , 如果 下 是 一 个 使 得 刀 一 下 (] 一 0 的 对 称 
分 布 , 那么 P{ln-:Sn| > e} 一 0. 但 是 ,只 有 当 1 工 - F(t) 在 50 上 可 积 (这 是 一 个 
较 强 的 条 件 ) 时 , 期 望 才 存 在 . 
(有 趣 的 是 : 强大 数 定律 只 对 期 望 存在 的 变量 成 立 . 见 7.8 节 的 定理 4. ) 


在 第 1 卷 第 10 章 中 讨论 了 大 数 定律 的 经 验 意义 , 在 那里 特别 注意 到 了 “公平 赌博 " 的 
经 典 理论 .特别 地 , 我 们 已 看 到 ， 即 使 在 期 望 存在 时 ，“ 公 平 赌博 ”的 一 个 参加 者 也 可 能 强 


@ 由 (7.7) 推出 , T(t) 一 0 蕴含 c(b) 一 0. 其 逆 也 是 正确 的 ; 见习 题 11. 关于 定理 1 的 另外 一 种 证 
明 , 见 17.2 节 . 
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烈 地 处 于 输 的 一 方 . 另 一 方面 , 对 彼得 堡 赌博 的 分 析 说 明 , 古典 理论 也 适用 于 一 些 期 望 为 无 
限 的 赌博 , 除了 “公平 的 入 场 费 ”将 依赖 于 要 参加 的 试验 次 数 以 外 . 下 述 定理 使 这 个 叙述 更 
加 精确 . 
我 们 考虑 具有 共同 分 布 F 的 独立 正 变量 Xk. [因此 F(0) = 0.]X 可 以 看 作 是 可 能 的 赢 
利 , an 可 以 看 作 是 参加 n 次 试验 的 总 入 场 费 . 我 们 令 
pls) 
p(s) = / sP{ds}, Te = (7.10) 
定理 2 存在 这 样 的 常数 an, 使 
Pl{las'Sn —1|>e}—0 (7.11) 
的 充 要 条 件 是 @， 当 s 一 co 时， p(s) 一 o0. 在 这 种 情形 下 ， 存在 这 样 的 数 sn， 使 得 
np(sn) = sn, (7.12) 
并 且 (7.11) 对 an = np(sn) 成 立 . 
证 (a) 充分 性 . 设 p(s) 一 co， 对 于 很 大 的 n， 函数 ny(s)/s 所 取 的 值 > 1; 但 是 当 
3 一 oo 时 , 它 趋 于 0. 函数 是 右 连 续 的 , 并 且 左 极限 不 可 能 大 于 右 极限 ， 如 果 sn 是 所 有 使 
得 np(s)s-，< 1 的 s 的 下 界 , 那么 (7.12) 成 立 . 
设 jn = Msn) = E(X1). 我 们 利用 引 理 中 的 不 等 式 (7.5)( 其 中 z = eyin) 可 得 


| 六 . | > < Ba?) + nll — F(sn)]. (713) 
通过 分 部 积分 可 以 把 E(Xf?) 化 成 一 个 被 积 函数 为 z]1 一 F(z)] 的 积分 . 由 假设 函数 z[1 一 F(z)] 
是 oly(z)). 因此 ，E(X?) = 0(snjym)， 由 (7.12) 知道 这 表示 (7.13) 中 右边 第 一 项 趋 于 零 . 
类 似 地 ，(7.12) 和 p(s) 的 定义 (7.10) 表明 nl - E(sn)] 一 0. 这 样 (7.13) 就 化 成 了 带 有 
an = npn 的 (7.11). 

(b) 必要 性 . 我 们 现在 假设 (7.11) 成 立 ， 并 利用 满足 s。= 2an 的 截 尾 (7.2)， 因 为 
BE(X) < snjm, 我们 由 带 有 z = ean/n 的 基本 不 等 式 (7.5) 得 到 


P{S。 > mpm + ean} < Bs + nll ~ F(an)]. (714) 
因为 我 们 讨论 的 是 正 变 量 , 所 以 
P{S» < 20n} < P {pax Xk < 20n} = FP"(2an). (715) 


由 假设 , 左边 趋 于 0, 这 殖 含 nl 一 下 (2an)] 一 0( 因 为 对 于 z < bz < e-0-*)). 如 果 nun/an 
趋 于 0, 那么 (7.14) 的 右边 也 趋 于 0, 这 个 不 等 式 显然 与 假设 (7.11) 矛盾 . 这 个 论证 也 适用 
于 子 序列 ,并 且说 明 nyn/an 都 取 0 以 外 的 有 界 值 ; 这 又 蕴含 p(2an) 一 oo. 


@ 在 8.9 节 (定理 2) 中 将 会 看 到 ,p(s) 一 oo 的 充 要 条 件 是 ks) 在 无 穷 远 点 缓慢 变化 ， 关 系 式 
(7.11) 等 价 于 azl5n -了 ,1( 见 8.2 节 ). 
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为 了 证 明 当 z 以 任何 方式 趋 于 oo 时 都 有 p(z) 一 co, 我 们 选取 这 样 的 an, 使 得 2an < 
z < 2an+1. 于 是 p(z) > (2an)an/ant1. 显然 , 为 使 (7.11) 成 立 , 必须 保证 an+1/an 是 有 界 
的 - p- 


*7.8 ”强大 数 定律 


设 X1,X2,… 是 具有 共同 分 布 玉 的 相互 独立 的 随机 变量 , 且 E(Xx) = 0. 我 们 
照例 令 5n = X 十 … 十 Xn. 弱 大 数 定律 说 明 , 对 于 每 个 e > 0， 


P{n-!lsn| > 时 一 0. (8.1) 


这 个 事实 并 不 排除 n-15。 对 于 无 穷 多 个 n 变 成 任意 大 的 可 能 性 . 例如 ， 在 对 称 随 
机 游 动 中 , 质点 在 第 n 步 通 过 原点 的 概率 趋 于 0， 而 且 确 实 要 通过 原点 无 穷 多 次 . 
在 实际 中 ,我 们 对 当 n 为 任 一 特别 大 的 值 时 (8.1) 的 概率 不 怎么 感 兴趣 ， 更 有 趣 
的 问题 是 , n-!|5n| 是 否 最 终 变 成 并 保持 很 小 ? 即 是 否 对 于 所 有 的 n > N 同时 有 
n-1|Sn| < e? 因此 , 我 们 想 知道 事件 Pn-15。 一 0 的 概率 . 

如 果 这 个 事件 的 概率 为 1, 那么 我 们 称 {Xk} 服从 强大 数 定律 . 

下 一 个 定理 将 说 明 , 当 E(Xi1) = 0 时 , 情况 是 这 样 的 . | 这 个 陈述 比 弱 大 数 定律 
强 得 多 . 这 可 由 下 列 事实 推出 : (8.1) 对 一 些 期 望 不 存在 的 序列 {Xk} 也 成 立 . 相反 ， 
期 望 的 存在 性 是 强大 数 定律 的 必要 条 件 . 事实 上 , 将 在 本 节 的 末尾 讨论 的 强大 数 定 
律 之 道 说 明 , 在 期 望 不 存在 的 情况 下 , 均值 n-!|5n| 一 定 无 穷 多 次 地 超过 任 一 预先 
指定 的 边界 值 a. ] 
定理 1 强大 数 定律 . 设 X1,XX2,… 是 独立 同 分 布 变量 ， 且 E(Xi) = 0. 那么 以 概 
率 1 有 m-1lSn 一 0. 

证 明 依赖 于 截 尾 , 实际 上 与 具有 不 同 分 布 的 序列 有 关 . 因此 , 为 了 避免 重复 , 我 
们 把 证 明 推迟 ,而 先 建立 另 一 个 有 广泛 用 途 的 定理 来 为 此 证 明 作 准 备 . 
定理 2 设 X1,X2,… 是 具有 任意 分 布 的 独立 随机 变量 . 假设 对 于 所 有 的 上 ,EE(Xk) = 
0, 并且 

DE(S?) < oo， (8.2) 
k=1 

那么 序列 {5n} 以 概率 1 收敛 于 一 有 穷 极 限 5. 
证 我 们 利用 由 变量 Xx 定义 的 无 穷 维 样本 空间 . 设 4(e) 表示 “不等式 |5n 一 Sm| > e 
对 于 某 些 任意 大 的 下 标 n,m 成 立 ” 这 个 事件 . {5%} 不 收敛 这 个 事件 是 事件 4(e) 在 
e 一 0 时 的 单调 极限 ， 因 而 只 要 证 明 P{4(e)} = 0 就 行 了 . 设 Am(e) 表示 “对 某 个 

* ”初恋 时 可 以 略 去 本 节 

@ 由 4.6 节 的 0-1 律 推出 , 这 个 概率 等 于 0 或 1, 但 是 我 们 将 不 利用 这 个 事实 . 
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n> m,|5n 一 Sm| > e 这 个 事件 , 那么 A(e) 是 递减 的 事件 序列 {4m(e)} 在 m 一 oo 
时 的 极限 ， 因 此 只 要 证 明 P{Am(e)} 一 0 就 够 了 . 最 后 , 对 > m, 令 Amn(e) 是 
“对 于 某 个 m < kk < n,|Sk 一 Sm| > e" 这 个 事件 . 根据 科 尔 莫 戈 罗 夫 不 等 式 


P{4wn(e} < ?Var(Sn 一 Sm) 一 < 二 E(XK). (8.3) 
k=m+1 


令 n 一 00, 我 们 得 到 
P{An(O} <e? 5 E(X?). (8.4) 
k=m+1 
当 m 一 oo 时, 右边 趋 于 0. 
这 个 定理 有 许多 应 用 ， 下 列 定理 是 这 个 定理 的 一 个 被 用 来 证 明 强大 妆 定 委 的 
变形 . 
定理 3 设 Xi,X2,…… 是 具有 任意 分 布 的 独立 变量 . 假设 对 于 所 有 的 让 ,EE(Xk) = 0. 
如 果 bi<bo<.… 一 oo 且 
有 ECX < o0, (8.5) 
那么 级 数 科 姑 2Xk 以 概率 1 收 伊 ,而 且 


bi1S, 一 0. (8.6) 


证 第 一 个 断言 可 以 通过 把 定理 2 应 用 于 随机 变量 姥 1Xi 而 立即 得 到 . 下 列 常用 
的 引 理 说 明 , 关系 式 (8.6) 在 使 级 数 收 敛 的 每 个 点 上 者 成 立 , 这 就 完成 了 证 明 .。 > 
引 理 1 ( 克 罗 内 克 引 理 .) 设 {Zk} 是 任 一 数列 ， 且 0 < bi < bo <… 一 00. 如 果 级 


数 并 Pbkzk 收效 ， 那 么 
1 
Tl. 二 Tn 
bn 


证 用 pn 表示 我 们 这 个 收敛 级 数 的 余部 . 那么 对 于 n= 1,2,…， 


一 0. (8.7) 


Tn = bn(pn-1 — pn), 
因此 


ZT1+**+ 1 扫 po 

n 

ain rs ep 入 表 
页 Ar 十 责 Pk(bet1 — bk)+ (8.8) 


设 当 上 >7 时, |pk| < e 因为 bs 一 co, 所 以 前 项 对 总 和 的 贡献 趋 于 0, 而 其 余 各 
项 的 和 至 多 等 于 e(bn 一 br)/bn < e. 因此 (8.7) 成 立 . > 


在 回 到 强大 数 定律 之 前 , 我 们 来 证 明 另 一 个 纯 分 析 性 质 的 引 理 . 
引 理 2 设 诸 变 量 Xk 有 共同 的 分 布 严 , 则 对 任 a > 0, 当 且 仅 当 E(X%) 存在 时 ， 
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DP{lXk| > ak} < oo. (8.9) 
证 根据 5.6 节 的 引 理 2, 当 且 仅 当 


人/ “0 -PCA+ECaldaz<oo (8.10) 

0 

时 , 期 望 E(X1) 存在 . 可 把 (8.9) 中 的 级 数 看 作 积分 的 黎 曼 和 ,因为 被 积 函 数 是 单 

调 的 ,所 以 关系 式 (8.9) 和 (8.10) 是 等 价 的 . p 
我 们 现在 能 够 来 证 明 强大 数 定律 .9 


定理 1 的 证 明 ”我 们 利用 截 尾 法 , 定义 新 变量 如 下 : 


RX 二 Xk，Xk 二 0， 如 果 |Xk| < 及 


(8.11) 
天 二 0， XK =Xk， 如 果 |Xk| > 大 . 
因为 存在 一 个 有 限 的 期 望 , 所 以 由 上 一 引 理 ( 令 a = 1) 可 得 
DP{XK #0} < ceo， (8.12) 
这 蕴含 , 以 概率 1 只 有 有 穷 多 个 变量 X 不 为 0. 因此 , 利用 明显 的 记号 , 以 概率 1 
有 S54 一 0. 
其 次 , 我 们 来 证 明 
Dk?E(XI) < oo. (8.13) 
根据 定理 3, 这 蕴含 着 以 概率 1 有 
n7[S% — E(S,)] 一 0. (8.14) 
但 是 ECX 一 0, 因此 显然 有 
n-1E(S’) = mr 和 CC) 一 0. (8.15) 
k=1 
为 完成 证 明 ,， 只 剩 下 验证 断言 (8.13) 了 . 由 于 
kk 
E(XR)= TF{dz}, 8.16 
Os) > {ee (20 


所 以 
@ 关于 一 个 更 直接 的 证 明 , 见习 题 12. 
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XE) = 六 z2P{dz} 六 | (8.17) 
rt isel<i a! 
内 层 的 和 小 于 2/j, 因此 有 边 小 于 
oo 十 oo 
F{dz} = F{dz}. 8.18 
/a r= plraa (8.18) 
这 就 完成 了 证 明 . > 


我 们 已 看 到 , 形 如 (7.8) 的 弱 大 数 定律 也 适用 于 一 些 期 望 不 存在 的 序列 . 这 与 强大 数 定 
律 形成 明显 对 比 , E(Xi ) 的 存在 性 是 强大 数 定律 的 必要 条 件 . 事实 上 , 下 一 个 定理 说 明 , 在 
不 存在 有 限期 望 的 情况 下 , 均值 Sn/m 的 序列 以 概率 1 无 界 . 
定理 4 (强大 数 定律 之 北 .) 设 X1,X2，… 是 独立 同 分 布 的 变量 . 如 果 EE(|X1|) = o0， 那么 
对 于 任 一 数列 {cn}， 以 概率 1 有 
limsup |n-15n — cn| = oo. (8.19) 


证 令 4x 表示 |Xk| > ak 这 一 事件 . 这 些 事件 是 相互 独立 的 . 由 引 理 2， 期 望 不 存在 蕴含 
亏 P{4n} 发 散 . 根据 博 雷 尔 - 坎 泰利 第 2 引 理 ( 见 第 1 卷 8.3 节 ), 这 表示 以 概率 1 有 无 穷 
多 个 事件 4x 发 生 , 因此 序列 |Xx|/k 以 概率 1 无 界 . 但 是 , 因为 Xx = Si 一 Ss-1， 所 以 若 
15nl/n 有 界 ， 则 |Xk|/k 也 有 界 . 从 而 我 们 断言 , 均值 Sn/n 的 序列 以 概率 1 无 界 . 

这 就 对 ck = 0 这 一 特殊 情形 证 明了 断言 (8.19), 一 般 情 形 可 通过 对 称 化 化 为 特殊 情形 . 
与 在 5.5 节 中 一 样 ， 我 们 用 “"Xx 表示 对 称 化 了 的 变量 Xn. 由 5.5 节 对 称 化 不 等 式 可 推出 
(J?Xk|) = o0, 因此 均值 "Sn/n 的 序列 以 概率 1 无 界 . 但 是 "Sn 可 以 通过 把 Sn 一 cn 对 称 
化 得 到 , 因此, (Sn - cn)/n 为 有 界 的 概率 是 0. ‘Pp 


*7.9 ”向 鞭 的 推广 


5.8 节 (e) 中 的 科 尔 莫 戈 罗 夫 不 等 式 为 7.8 节 的 证 明 提供 了 主要 的 工具 . 细 读 
这 些 证 明 可 以 看 出 , 所 假设 的 变量 的 独立 性 只 是 被 用 来 推导 一 些 期 望 的 不 等 式 , 因 
而 主要 的 结果 可 以 搬 到 鞍 和 下 靳 上 来 . 这 样 的 推广 对 许多 应 用 是 重要 的 , 并 且 它 们 
对 我 们 的 定理 的 本 质 作 了 新 的 说 明 . 

由 6.12 节 知 , 称 随机 变量 太 的 有 穷 或 无 穷 序 列 构成 一 个 下 闺 , 如 果 对 于 所 有 
的 7， 

E(U-|Bk) > Us, k= 1 2 一 1 (9.1) 

其 中 8B1 C 2 C… 是 一 列 递增 的 事件 c 代数 . 当 把 所 有 的 不 等 式 换 为 等 式 时 , 称 
{Ur} 是 一 个 鞭 . [在 每 一 种 情况 下 , 如 果 条 件 (9.1) 对 于 特殊 值 =” 一 1 成立 , 那 

* 后 面 各 章 用 不 到 本 节 的 内 容 . 
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么 (9.1) 中 的 > 一 1 个 条 件 都 被 满足 . ] 我 们 还 知道 , 如 果 {Xk} 是 一 列 独立 随机 变 
基 且 E(Xe) = 0, 那么 部 分 和 Sn 构成 一 个 对 ; 此 外 , 如 果 方 差 存在 , 那么 {52} 是 
一 个 下 黄 . 

定理 1 ( 正 下 鞭 的 科 尔 莫 匡 罗 夫 不 等 式 .) 设 U1,…,Un 是 正 变量 . 假设 对 于 < n， 
它们 满足 下 狱 的 条 件 (9.1), 那么 对 于 t > 0， 


P{maxUs >t} < tIE(Un). (9.2) 
ken 


如 果 {Uk} 是 一 个 任意 的 著 ， 那么 诸 变量 IUi| 构成 一 个 下 拷 . ( 见 6.12 节 中 的 
引 理 ) 由 此 推出 , 定理 1 包含 下 列 重要 的 
系 ( 芹 的 科 尔 英 苹 罗 夫 不 等 式 ). 如 果 1，-…,Un 构成 一 个 狗 ， 那么 对 于 t > 0， 


~1 
P{apaxlUs| > t} < 1 E(IUn)). (9.3) 


定理 1 的 证 明 ”我 们 逐 字 逐 句 地 重复 5.8 节 (e) 中 的 科 尔 莫 姜 罗 夫 不 等 式 的 证 明 ， 
所 不 同 的 只 是 把 那里 的 5% 换 为 U.S 是 独立 随机 变量 之 和 这 个 假设 只 被 用 来 建立 
5.8 节 (8.16) 不 等 式 , 此 不 等 式 现在 可 写 为 


E(Unla;) > E(U;!a;). (9.4) 
由 于 lw; 是 8; 可 测 的 , 所 以 
E(Unla;|%B;) = Ia;E(Un|;) > Ujlaj (9.5) 


[ 见 5.10 节 (10.9)]. 取 期 望 ,我 们 就 得 到 (9.4). 

我 们 转向 7.8 节 无 穷 卷 积 定理 的 推广 , 虽然 它 只 导致 _ 般 的 粮 收 做 定 理 的 个 
特殊 情形 . 实际 上 , 杜 布 曾 证 明 , 如 果 把 条 件 E(52) < oo 换 为 E(15,|) 有 界 这 个 较 
弱 的 要 求 ， 那么 下 述 定理 仍然 成 立 . 但 是 , 这 个 一 般 定 理 的 证 明 是 复杂 的 , 我 们 之 
所 以 给 出 定理 2, 是 由 于 此 定理 的 重要 性 和 它 的 证 明 的 简洁 性 . (关于 一 种 推广 , 见 
习题 13. ) 
定理 2 ( 狱 收效 定理 ). 设 {Sn} 是 一 个 无 穷 的 蒜 ， 并 且 对 于 所 有 的 mn， 有 卫 (52) < 
C < oo. 存在 一 个 随机 变量 S, 使 得 以 概率 1 有 Sn 一 5S. 而 且 对 于 所 有 的 mE(Sn) = 
E(S). 

证 ”我们 重复 7.8 节 中 定理 的 证 明 . Sn 是 独立 变量 之 和 这 一 假设 在 (8.3) 只 被 用 来 
证 明 
E((Sn — Sm)’) 一 0,n,m 一 oo. (9.6) 
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我 们 由 6.12 节 知道 , {Sn} 的 黄 性 质 肆 含 , 对 于 n > m， 

E(Sn|Sn) = Sm. 
概 据 5.10 节 (10.9) 条 件 期 望 的 基本 性 质 , 这 蕴含 

E(SnSmlSm) = 52, n>m. (9.7) 
取 期 望 并 利用 5.10 节 (10.10) 关于 双重 期 望 的 公式 , 我 们 得 到 
E(SnSm) = E(S%), 
因此 
E(S2 — S52.) = E(S2) — E(S%), n>m. 


但 是 由 6.12 节 的 引 理 ， 诸 变量 52 构成 一 个 下 鞠 ， 因 此 序列 {E(52)} 是 单调 增加 

的 . 由 假设 ， 它 是 有 界 的 ， 从 而 它 有 有 穷 的 极限 . 这 蕴含 (9.6) 是 正确 的 . 黄 性 质 列 

会 E(Sn) 是 与 nn 无 关 的 , 等 式 E(5) = E(Sn) 可 由 序列 {E(52)} 的 有 界 性 推出 [8.1 

节 例 (e)]. > 
作为 一 个 直接 的 推论 , 我 们 得 到 如 下 的 类 似 于 7.8 节 定 理 3 的 

定理 3 设 {Xn} 是 这 样 一 列 随 机 变量 , 使 得 对 于 所 有 的 nn， 


E(Xn|Bn-1) = 0. (9.8) 
如 果 b<b2o<.… 一 00, 并 且 
Db?E(XR) < co， (9.9) 
那么 以 概率 1 有 
Pi 守 二 (9.10) 
证 容易 看 出 , 诸 变量 
Un = i (9.11) 


k=1 
构成 一 个 革 , E(U38) 以 (9.9) 中 的 级 数 为 界 . 因此 上 一 定理 保证 了 {Un} 的 几乎 必然 
收敛 性 . 由 科 罗 内 克 引 理 , 这 蕴含 断言 (9.10). > 
例 (a) 在 6.11 节 例 (b) 和 7.4 节 例 (a) 中 曾 讨论 过 波 利 亚 雄 子 模型 . 如 果 Yn 是 
第 m 次 试验 后 黑 球 的 比例 , 那么 已 经 证 明了 {Y%} 是 一 个 黄 , 我 们 现在 知道 以 概率 
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1 存在 一 个 极限 Y = lim Yn. 另 一 方面 , 第 n 次 试验 时 取得 黑 球 的 概率 可 以 通过 
把 二 项 分 布 随机 化 得 到 . 因此 , 如 果 Sn 是 前 n 次 试验 中 取得 的 黑 球 的 总 数 ， 那么 
n-1Sn 的 分 布 趋 于 7.4 节 例 (a) 中 的 8 分布 F. 由 此 推出 , 极限 变量 Y 服从 6 分 
布 F. 
例 (b) 分 支 过 程 . 在 第 1 卷 12.5 节 中 讨论 过 的 分 支 过 程 中 , 第 n 代 的 总 体 大 小 
Xn 的 期 望 为 E(Xn) = p"[ 见 第 1 卷 12.4 节 (4.9)]. 假定 第 (n 一 1) 代 由 ~ 个 个 体 组 
成 , Xn 的 (条件 ) 期 望 是 jv*, 这 与 以 前 诸 代 的 大 小 无 关 . 因此 , 如 果 令 Sn = Xn/p"， 
那么 序列 {Sn} 构成 一 个 贡 . 不 难 证 明 , 如 果 E(X?) < co, 那么 E(S2) 是 有 界 的 ( 见 
第 1 卷 12.6 节 的 习题 7). 这 样 我 们 得 到 了 一 个 惊人 的 结果 : Sn 以 概率 1 收敛 于 某 
一 极限 S-. 特别 地 , 这 蕴含 ，Sn 的 分 布 趋 于 So 的 分 布 . 这 些 结果 应 归功 于 哈里 
斯 (Harris). 
例 (c) ”调和 函数 . 为 了 清晰 起 见 ， 我 们 讨论 一 个 特殊 的 例子 ， 虽 然 下 面 的 论证 也 
适用 于 更 一 般 的 马尔 可 夫 链 与 和 谐 函数 [6.12 节 例 (o)]. 

设 忆 表示 由 满足 zi+z3 < 1 的 点 z= (z1,72) 组 成 的 圆 盘 . 对 于 任 一 点 re DD， 
设 Cu 是 圆心 在 z 且 包 含 在 中 的 最 大 的 圆周 . 我 们 考虑 D 中 的 一 个 马尔 可 夫 过 
程 {Y%}， 其 定义 如 下 . 如 果 丈 = z， 则 变量 Yi+1 在 圆周 C。 上 是 均匀 分 布 的 , 假 
设 初始 位 置 Yo =y 是 已 知 的 . 转移 概率 由 随机 核 K 给 出 , 对 于 固定 的 z,K 集中 在 
Cz 上 , 并 在 其 上 均匀 分 布 . 称 D 内 的 一 个 函数 uv 是 和 谐 的 , 如 果 ul(z) 等 于 在 
Cz 上 的 平均 值 . 现在 考虑 一 个 在 闭 圆 盘 D 中 连续 的 调和 函数 u, 那么 {u(Y)} 是 
一 个 有 界 鞠 , 因为 2 = limu(Y) 以 概率 1 存在 . 因为 坐标 变量 z; 是 调和 函数 ,所 
以 二 以 概率 1 趋 于 一 个 极限 Ye D. 容易 看 出 , 此 过 程 不 能 收敛 于 D 内 的 点 , 因 
此 也 以 概率 1 趋 于 DD 的 边界 上 的 一 点 工 . 

这 类 论证 的 扩张 可 以 用 来 研究 马尔 可 夫 过 程 的 渐 近 性 质 ， 也 可 以 用 来 证 明 有 
关 调和 函数 的 一 般 定 理 ， 比 如 有 关 径 向 的 边界 值 几乎 处 处 存在 的 法 图 定理 .@ 。 


7.10 习 题 
1 如果， 在 co 中 是 有 界 且 连续 的 , 那么 当 n 一 co 时 , 在 每 个 有 限 区 间 中 一 致 地 有 


{ntk 让 k 
去 人 和 ) re (1) = 


k=0 
提示 ! 回忆 第 1 卷 6.8 节 的 “ 负 二 项 分 布 ， 不 必 进 行 计算 . 
2. 如 果 uw 有 连续 导数 ww, 那么 Bn 的 导数 B4,。 一 致 地 趋 于 ww. 


® M. Brelot and J. L. Doob, Ann. Inst. Fourier, vol. 13(1963) pp. 395-415. 
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3. R? 中 的 伯 因 斯 坦 (Bernstein) 多 项 式 . 如 果 u(x,y) 在 三 角形 z> 0, y> 0, z+YyS1 
中 是 连续 的 , 那么 一 致 地 有 


(名 Wm (1 —2— "7" ~ ug,y)- 


4 在 0,1 中 连续 的 函数 v 可 以 用 侦 多 项 式 来 一 臻 遇 近 . 如 果 u(0) = 0, 那么 也 可 以 用 奇 
多 项 式 一 臻 通 近 . 9 

5. 如 果 心 在 区 间 0,00 中 连续 , 并 且 wu(co) 存在 , 那么 可 以 用 e-" 的 线性 组 合 一 致 地 到 
近 必 

6. 对 于 下 面 给 出 的 3 个 矩 序 列 ， 求 (3.5) 中 的 概率 pf, 利用 极限 关系 式 (3.11) 求 相应 
的 分 布 F. 


人 mm=zmOo<p<D， = (© pm = 一. 


Peat nt+2 

7.9 设 p 是 一 个 v 次 多 项 式 . 证 明 : 当 n>v 时 ， 会 2 恒 等 于 0. 因此 ，Bn,p 是 一 个 次 数 
和 "的 多 项 式 (尽管 它 形式 上 是 一 个 次 数 n > v 的 多 项 式 . ) 

8， 当 尺 有 密度 时 ，(6.4) 可 以 通过 (6.6) 的 积分 来 推导 . 

9. 平稳 序列 的 大 数 定律 . 设 {Xk]}(k = 0, 士 1, 士 2 …) 是 一 个 平稳 序列 , 与 (7.2) 中 一 样 用 
截 尾 法 来 定义 X%. 如 果 E(Xx) = 0, 且 当 n 一 oo 时, E(z6z%) = 0, 那么 


P{n- Xi + + Xn| > 是 一 0. 
10, 设 Xk 是 独立 的 , 并 如 在 (7.2) 中 那样 用 截 尾 法 来 定义 Xt. 令 an 一 0, 且 假设 


n 
DP{IXx!l > Ss} — 0, an? DE(XP) 一 0. 
pe 


k=1 
| Sn > 1 一 0. 


11. (与 7.7 并 定理 1 有 关 ) 证 明 olt) 一 0 蕴含 7(t) 一 0. 提示， 对 于 充分 大 的 z 证 明 
7(z) 一 了 Co) <e. 逐次 应 用 这 个 不 等 式 于 z = 十 24 外 …， 可 得 7(t) < 2e. 


12. (强大 数 定律 的 直接 证 明 ) 利用 7.8 节 定 理 1 的 证 明 中 所 用 的 记号 , 对 于 27 < < 2"+!， 
令 和 = max|3f|. 利用 科 尔 莫 戈 罗 夫 不 等 式 证 明 


@ 一 个 应 归功 于 继 医 (H. Ch. Miintz) 的 著名 定理 断 半 ,可 以 用 1,2m ,2"2，.… 的 线性 组 合 一 臻 到 
近 的 充 要 条 件 是 并 nk 发 散 . 
@ 利用 这 个 结果 可 大 大 简化 矩 问题 的 古典 解 (例如 在 索 险 符 和 堵 马 金 的 书 中 ). 


证 明 


— DE(Xt) 


k=1 
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Dj P(r > 2") < oo 


这 蕴含 强大 数 定 律 . (这 个 证 明 不 必用 到 7.8 节 的 定理 2 和 定理 3. ) 


13. (下 糯 的 收 伊 定理 ) 证 明 : 只 要 对 于 所 有 的 ,Ui > 0, 那么 7.8 节 的 定理 2 也 适用 于 下 
摧 


14. 把 5.7 节 例 (a) 中 的 切 比 雪夫 不 等 式 的 变形 推广 到 持 上 .人 


® A. W. Marshall, A one-sided analog of Kolmogorov’ s ineguaiity Ann. Math. Statist., vol. 
31(1960) pp. 483-487. 
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本 章 的 主要 结果 出 现在 8.1 节 、8.3 节 和 8.6 节 中 . 8.4 节 、8.5 节 和 8.7 节 可 以 

看 作 是 有 趣 例子 的 源泉 . 之 所 以 选择 这 些 例子 , 是 由 于 它们 在 其 他 章节 中 具有 重要 

性 . 

最 后 两 节 是 用 来 讨论 在 卡拉 马 塔 意义 下 的 正则 变化 函数 的 . 这 一 有 趣 的 理论 逐 

渐 地 显示 了 其 重要 性 , 但 是 在 教科 书 中 是 找 不 到 的 , 而 且 也 不 适合 于 对 分 布 函数 的 

讨论 . 利用 8.9 节 的 渐 近 关系 式 可 以 避免 概率 中 大 基 无 关 的 计算 , 它们 所 具有 的 技 . 
巧 性 与 简单 的 8.8 节 形成 对 照 . 


8.1 测度 的 收敛 性 


以 下 的 理论 与 维 数 无 关 . 为 了 表达 的 方便 , 文中 只 就 一 维 分 布 讨论 , 但 利用 3.5 
节 的 约定 , 诸 公 式 可 以 毫 不 改变 地 应 用 于 高 维 中 . 

两 个 例子 是 我 们 要 讨论 的 现象 的 典型 例子 . 
例 (a) ”考虑 一 个 任意 的 概率 分 布 F, 令 

Fn(7) = F(z —n-!). 

在 的 连续 点 xz 上 , 我 人 有 Fn(z) 一 F(z), 但 在 不 连续 点 上 , Fn(z) 一 F(z-), 但 
是 , 我 们 将 仍然 约定 , 序列 {Fn} 收敛 于 下 . 
例 (b) ”这 次 我 们 设 F(z) = F(z + n)， 其 中 下 是 连续 分 布 函 数 ， 于 是 对 于 所 
有 的 z, Fn(z) 一 1 极限 存在 , 但 不 是 一 个 概率 分 布 函 数 . 这 里 对 于 每 个 有 界 区 间 
Tn(7) 一 0, 但 当 了 为 全 直线 时 , Fn(1) 0. 
例 (c) 令 环 (z)= F(z 二 (-1)"n), 则 Fon(z) 一 1, 而 Bn+1(z) 一 0. 因此 , 像 这 
样 的 分 布 函 教 不 收敛， 然而 对 于 每 个 有 界 区 间 却 有 F{I} 一 0. p 
基本 概念 与 记号 

有 必要 区 别 3 种 连续 函数 类 . 在 一 维 中 ?, C(-o0, co) 是 所 有 有 界 连续 函数 组 
成 的 类 ; C[-ce, co] 是 具有 有 穷 极 限 u( 一 oo) 和 u(+o0) 的 连续 函数 所 成 的 子 类 ; 最 


@ 对 于 高 维 中 的 类 似 概 念 , 注意 在 一 维 中 , C[ 一 00, ce] 只 不 过 是 通过 加 土 oo 于 Ri 得 到 的 紧 直 线 上 的 
连续 函数 类 . 对 R? 中 的 C[ 一 oo, oc], 两 个 轴 都 被 这 样 地 扩大 , 这 要 求 极限 4(z, 十 co) 和 4( 土 oo, z) 
对 每 个 数 z 都 存在 . 这 函数 类 本 身 不 是 很 有 意思 , 但 是 分 布 函 数 属于 它 .对 于 Co( 一 co, oo), 要 求 
utz, 二 co) = u(+o0,2) =0. 
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后 , Co( 一 oo,co) 是 “在 无 穷 远 处 等 于 0”, 即 u( 士 oo) = 0 的 连续 函数 所 成 的 子 类 . 
如 果 了 是 开 区 间 且 其 端点 不 是 原子 ,那么 我 们 说 I 是 概率 分 布 F 的 连续 区 
间 .® 把 整 条 直线 当 作 连续 区 间 . 在 本 节 中 , 我 们 利用 简略 记号 


Bj 站 va)Ptaah E(u) = [uartes). GD 


本 节 中 F 表示 正常 的 概率 分 布 , 但 容许 是 亏损 的 ( 即 它 的 总 质量 可 以 < 1，. 
见 5.1 节 中 的 定义 ). 
定义 了 序列 {Fm} 收敛 于 (可 能 是 亏损 的 ) 分 布 如 果 对 于 玉 的 每 个 有 界 的 连续 区 
间 I， 

Fn{1} 一 F{T). (1.2) 

` 在 这 种 情形 下 , 我们 记 FF 一 下 或 F = limF，. 

如 果 下 不 是 亏损 的 ， 那么 称 收 伊 是 正常 的 . 

为 了 令 述 清晰 ,我们 有 时 谈 及 非 正常 收敛, 以 表示 极限 下 是 亏损 的 . 

为 了 便于 参考 , 我 们 给 出 2 个 正常 收敛 的 简单 准则 . 
准则 1 收效 到 一刀 是 正常 的 ， 当 且 仅 当 对 于 每 个 = > 0, 有 相应 的 数 a 和 NN, 使 
得 对 于 n > N, Fn{-a,a} > 1 一 <. 
证 不 失 一 般 性 , 我 们 可 以 假设 =a,a 是 极限 F 的 连续 区 间 . 条 件 是 充分 的 , 因为 
它 蕴含 FT-a,aj > 1-e, 因而 不 能 是 亏损 的 . 反之 , 如 果 FF 是 概率 分 布 , 那么 
我 们 可 以 选择 这 样 大 的 a, 使 F{-a,a} > 1 一 让 从 而 对 于 充分 大 的 w， 


Fn{-a,a} >1-&, 


因而 条 件 是 必要 的 . [a 
准则 2 为 使 概率 分 布 序列 {FF} 收敛 于 正常 概率 分 布 灭 ， 当 且 仅 当 对 于 已 的 每 
个 连续 区 间 (有 界 或 无 界 )7，(1.2) 成 立 . 

(这 蕴含 , 在 正常 收敛 的 情况 下 ,F(z) 一 F(z) 在 下 的 每 个 连续 点 上 成 立 .) 
证 我们 可 以 假设 F 一 ,其 中 下 可 能 是 亏损 的 . 显然 , 为 使 是 正常 的 , 当 且 
仅 当 (1.2) 对 于 了 = 一 06,065 成 立 , 因此 准则 的 条 件 是 充分 的 . 其 次 假设 是 正常 的 
概率 分 布 . 对 于 z > -a, 区 间 =65;z 是 -00,4 与 wz 的 并 集 . 因此 , 利用 上 一 准 

@ 在 高 维 中 要 求 [的 边界 有 概率 0. 

@ 对 于 对 一 般 测度 论 感 兴趣 的 读者 ,我 们 陈述 如 下 内 容 . 只 要 把 “连续 区 间 " 换 为 “边界 测度 为 零 的 

开 集 ”本 节 的 定义 和 定理 对 于 任意 局 部 紧 空 间 中 的 有 界 测度 也 适用 而 无 任何 改变 ， 有 界 区 阿 对 应 


于 紧 集合 的 子 集 . 最 后 ,Co 是 在 无 穷 远 处 为 零 的 连续 函数 类 , 即 u E Co， 当 且 仅 当 u 是 连续 的 ， 
且 在 某 个 紧 集 合 外 有 ju| < 8. 其 他 的 函数 类 在 本 节 中 不 起 作用 - 
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则 可 以 看 出 , 对 于 充分 大 的 a 和 n, Fn {00,Z} 与 下 { 一 oo,z} 之 差 小 于 3e. SS 
论证 适用 于 z,06, 因此 (1.2) 对 于 所 有 的 半 无 穷 区 间 都 成 立 . 

我 们 用 (1.2) 定义 了 收敛 性 , 但 下 一 定理 说 明 , 我 们 也 可 利用 (1.3) 作为 定 X 关 
系 式 . 
定理 1 (i) FF 一下, 当 且 仅 当 @ 


对 于 所 有 ue Co(-00,00)， 有 En(w) 一 E(w). (1.3) 
(让 如 果 收 敛 是 正常 的 ,那么 对 于 所 有 的 有 界 连 续 函 数 ， 
En(u) — E(w). 
证 (a) ”从 关于 正常 收敛 性 的 断言 开始 是 方便 的 . 假设 是 概率 分 布 ，Fn 一 下. 令 
习 是 一 连续 函数 , 使 得 对 于 所 有 的 z,ju(z)| < M. 令 A 是 下 如 此 之 大 的 连续 区 间 ， 
使 得 F{4} > 1 一 e. 于 是 对 于 余 集 4', 当 所 有 的 n 充分 大 时 , Fn{ 4’} < 2e. 
因为 4 在 有 限 区 间 中 是 一 致 连续 的 , 所 以 可 以 把 4 分 成 这 样 小 的 区 间 卫 ,…, I， 
使 得 在 每 个 区 间 内 , w 的 波动 小 于 e. 这 些 区 间 I 可 以 选 为 下 的 连续 区 间 . 在 4 
内 ,我 们 可 以 用 阶梯 函数 o。 来 逼近 uv， 这 个 o 在 每 个 I 中 取 常 数值 ， 并 且 对 于 


所 有 的 z e 4,|u(z) 一 olz)| < ce 在 余 集 4' 中 ,我 们 设 o(z) = 0， 于 是 对 于 
ze4ilulz)-colzjl <M, 且 


[E(w — E(o)| < eF{A} + MF{A'} < e+ Me. (1.4) 
类 似 地 ， 对 于 充分 大 的 n， 
[En(w) — En(o)| < eFn{A} + MFn{A'} 
< e+2Me. (1.5) 
现在 En(c) 是 趋 于 F{I} 的 值 Fn{I} 的 有 穷 线性 组 合 . 由 此 推出 En(o) 一 
E(o), 因此 对 于 充分 大 的 n， 
I[E(0) - En(o)| < e. (1.6) 
联合 上 面 3 个 不 等 式 , 得 
[E(w) ~ En(W| < [E(w) ~ E(o)| + IE(c) — En(o)| 
+ [En(0) — En(w)| < 3(M + 1)e. (1.7) 


@ 如 果 对 于 某 个 函数 类 , En (w) 一 E(u), 那么 我 们 说 Fa“ 关于 这 个 函数 类 弱 " 收 敏 于 FF. 因此 在 定义 
1 意义 下 的 收敛 等 价 于 关于 Co( 一 co, co) 的 弱 收 敛 . 
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由 < 之 任意 性 , 这 蕴含 En(w) 一 E(w). 

这 个 论证 对 非 正 常 收敛 的 情形 就 失效 了 , 因为 这 时 Fn{4'} 未 必 很 小 . 但 是 在 
这 种 情形 下 , 我 们 仅 考虑 函数 ve Co( 一 00,o00), 且 区 间 4 可 以 选 得 很 大 , 使 得 对 于 
ZE h',lu(z)| < <. 于 是 对 所 有 的 z,|u(z) - c(z)| < <, 不 等 式 (1.4) - (1.5) 以 右 端 换 
为 = 的 更 强 的 形式 成 立 . 因此 , (1.2) 蕴含 (1.3). 

(b) 我 们 来 证 明 9En(u) 一 E(u) 蕴含 Fn 一 FF. 令 工 是 长 度 为 工 的 正之 连续 
区 间 . 用 五 表示 具有 长 度 工 + 5 的 同心 区 间 ， 其 中 5 选 得 足够 小 , 使 得 F{1s} < 
F{I} +e， 令 … 是 一 连续 函数 ， 它 在 了 内 取 常 数值 1, 在 五 外 取 0， 且 处 处 有 
0< vw(z) 和 1. 于 是 


En(u) > F,{l}, E(u) < F{1s} < F{I}+e. 
而 对 充分 大 的 n, 我 们 有 
En(u) < E(u) < E(u) +é, 


因此 
Fn{I} < En(u) < E(u)+e < F{ls}+e < F{I}+2e. 


把 1; 换 为 长 度 为 工 一 6 的 区 间 ， 利 用 类 似 论证 ， 我 们 得 到 反 向 不 等 式 Fa{I} > 
F{T} - 2e,， 从 而 Fn 一 局, 如 所 欲 证 . : 
我 们 希望 有 一 个 不 必 先 知道 其 极限 的 性 质 的 收敛 准则 . 这 由 下 列 定理 给 出 . 
定理 2 ”为 使 概率 分 布 序 列 {Fn} 收敛 于 一 个 (可 能 是 亏损 的 ) 极限 分 布 ， 当 且 仅 

当 对 于 每 个 WE Co( 一 00,00), 期 望 值 序列 {En(w)} 收敛 于 有 穷 极 限 . 
证 8 必要 性 包含 在 定理 1 中 . 为 了 证 明 充 分 性 , 我们 提前 使 用 8.6 节 的 选择 定理 
1.( 它 是 基本 的 , 但 是 最 好 把 它 和 有 关 的 论题 一 起 讨论 .) 
按照 这 个 定理 ， 总 可 以 选择 一 个 子 列 {,} 收敛 于 一 个 有 可 能 是 亏损 的 极限 
$, 用 EE*(w) 表示 以 关 于 $ 的 期 望 . 令 ve Co(-co,co). 于 是 根据 定理 1, Enk(u) 一 
E*(w). 但 也 有 Enx(w) 一 limEn(w). 从 而 E*(w) = limEn(wW),u 在 Co(~o0,00) 中 是 
任意 的 . 再 次 应 用 定理 1 可 得 ,$B, 此 即 所 欲 证 . > 
例 (d)” 扰 的 收敛 性 .如果 分 布 Fs 集中 于 5,1 上, 那么 在 这 个 区 间 外 的 定义 是 
不 重要 的 . 在 定理 中 ， 只 需 假设 v 在 0,1 上 连续 就 够 了 . 每 个 这 样 的 函数 可 以 用 多 
项 式 一 致 地 逼近 ( 见 7.2 节 ). 因此 , 定理 可 以 重新 叙述 如 下 . 集中 在 ,1 上 的 分 布 到 
@ 应 用 定理 2 的 证 明 是 比较 简单 的 , 但 是 这 里 的 证 明 更 为 直观 . 


@ 如 果 利用 里 斯 表示 定理 (5.1 节 中 的 注 D, 那么 此 定理 是 显然 的 . 实际 上 , limEn(w) 定义 了 一 个 线 
性 泛 函 , 按照 里 斯 表现 定理 , 极限 是 关于 某 个 下 的 期 望 . 
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的 序列 收 钱 于 极限 斑 ,， 当 且 仅 当 对 每 个 k， 夫 En(X*) 的 序列 收敛 于 一 个 数 Uk. 在 
这 种 情形 下 , uk 二 E(XK) 是 下 的 上 k 阶 算 , 且 因 为 Jio = 1， 所 以 收敛 是 正常 的 .( 见 
7.3 节 .) 
例 (e) ” 矩 的 收效 性 ( 续 ). 一 般 说 来 , 即使 F， 正常 收敛 于 了 , F 的 期 望 也 未 必 是 
收敛 的 . 例如 ,如 果 五, 对 m2 赋 以 质量 "1， 对 原点 赋 以 质量 1 一 n-!, 那么 {Fn} 
收敛 于 集中 在 原点 上 的 分 布 , 但 是 En(X) 一 co. 然而 我 们 有 下 列 有 用 的 准则 : 如 
果 FE 一 下, 且 对 于 某 个 p > 0， 各 个 期 望 En(|XI?) 有 界 ， 那么 玉 是 正常 概率 分 
布 . 实际 上 |zlPF{dz} > ae(1 -Ff-a,aj)), 只 有 当 1-F{-a,a} < a-?M 
时 才 有 ae(1 及 人 本 < M. 由 于 a 可 以 选取 任意 大 , 所 以 下 必 是 正常 的 . 稍微 
加 强 这 个 论证 , 就 可 证 明 阶 数 a < p 的 绝对 甜 En(|X|“) 收敛 于 E(|X|?). 
例 (f) 密度 的 收敛 性 .如 果 概 率 分 布 Fn 有 密度 fn, 那么 即使 Fn 一 下 且 下 有 连续 
密度 , f 也 未 必 收敛 . 作为 例子 , 对 于 0 <z<1, 令 fn(Z) =1-cos 2nnz; 对 于 z 的 
其 他 值 , 令 f(x) = 0. 此 处 Fn 收敛 于 均匀 分 布 , 具有 分 布 密度 f(z) = 1,0<z < 1， 
但 所 不 收敛 于 f. 另 一 方面 , 如 果 所 一 f 且 f 是 概率 密度 ,那么 Fn 一 下 ,其 中 下 
是 具有 密度 f 的 正常 分 布 . 实际 上 , 法 图 引 理 [4.2 节 (2.9)] 蕴含 ,对 于 每 个 连续 区 
间 工 
lim inf Fn{1} > F{I}. 

如 果 对 于 某 个 工 不 等 号 成 立 , 那么 它 对 每 个 较 大 的 区 间 , 特别 是 对 二 00,05 0 
这 是 不 可 能 的 , 因此 (1.2) 成 立 . 

在 讨论 诸如 sin tz 或 v(t + z) 这 样 的 依赖 于 一 个 参数 t 的 函数 w 时 ， 知道 对 
于 充分 大 的 n, 关系 式 |En(w) 一 E(w)| < < 对 所 有 的 上 同时 成 立 , 常常 是 有 用 的 . 
我 们 来 证 明 ,如 果 函 数 ui 构成 的 族 是 等 度 连 续 的 , 即 如 果 对 于 每 个 。> 0, 存在 一 
个 与 + 无 关 的 5, 使 得 当 |z2 一 z1| < 5 时 |ut(za) 一 ur(z1)| < ,那么 上 述 情 况 确实 
成 立 . 
系 假设 Fn 一 下 (正常 收敛 ). 令 {uc} 是 依赖 于 参数 上 的 等 度 连续 函数 族 ， 且 使 得 
对 于 某 个 M 和 所 有 的 ,|ut| < M < co. 于 是 关于 一致 地 有 En(ut) 一 E(ut). 
证 定理 2 中 En(u) 一 E(w) 的 证 明 依赖 于 把 区 间 4 划分 成 小 区 间 , 在 每 个 小 区 
间 中 的 变化 小 于 e. 在 现在 的 情况 下 ,这 种 划分 的 选择 与 t 无 关 , 从 而 断言 就 是 
显然 的 了 . p> 
例 (g) 令 ui(z) = u(tz), 其 中 以 是 满足 lw(z)| < 1 的 可 微 函 数 . 根据 中 值 定理 ， 


lu(z2) 一 ua(za)l < ltllza — zi. 


因此 ,只 要 把 t 局 限 在 有 限 区 间 =ara 上 , 函数 族 就 是 等 度 连 续 的 . 因此 ,在 每 个 有 
限 t 区 间 上 ,一致 地 有 En(u) 一 E(u). 让 
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8.2 特殊 性 质 


按照 5.2 节 的 定义 1， 两 个 分 布 V 和 V 是 同类 型 的 ， 如 果 它 们 只 是 位 置 参数 
和 尺度 参数 有 所 不 同 ， 即 如 果 


V(z) =U(Az+B), A>0. (2.1) 


我 们 现在 来 证 明 , 在 位 置 参 数 的 改变 不 影响 极限 分 布 类 型 的 意义 上 , 收敛 性 是 一 种 
类 型 性 质 . 正 是 这 个 事实 ,使 得 不 指定 适当 的 参数 而 说 “ 渐 近 正 态 序列 ”成 为 合理 
的 . 更 明确 地 , 我 们 证 明 

引 理 1 令 U 和 V 是 两 个 都 不 集中 于 一 点 上 的 概率 分 布 如 果 对 于 概率 分 布 序列 
{Fn}, 常数 on > 0 及 an > 0, 在 所 有 连续 点 上 ， 


Fn(anT +bn) = U2), Fn(anz + Bn) — V(7), (2.2) 
那么 


,A>0， 多- ，PB， (2.3) 
an Qn 


并 且 (2.1) 成 立 , 反之 , 如 果 (2.3) 成 立 , 那么 (2.2) 中 的 两 个 关系 式 是 等 价 的 , 且 都 
益 含 (2.1). 

证 ”由 于 对 称 性 , 我 们 可 以 假设 (2.2) 中 第 一 个 关系 式 成 立 . 为 了 简化 记号 , 我 们 
令 Gn(z) = Fn(anz +bn),pn = Qn/anson = (Bn 一 bn)/an, 其 次 设 Gn 一 U. 如 果 


pn — A, on — 8B, (2.4) 


那么 显然 
Gn(pnz + 0n) = V(z), (2.5) 


其 中 V(z) = U(Az + B). 我 们 来 证 明 , 只 有 当 (2.4) 成 立时 ，(2.5) 才 可 能 成 立 . 
因为 Y 不 集中 在 一 点 上 , 所 以 至 少 存在 两 个 值 z' 和 x”, 使 序列 {onz' + on} 
和 {pnz” + on} 保持 有 界 . 这 蕴含 序列 {pn} 和 {on} 的 有 界 性 , 因此 可 以 找到 这 样 
的 整数 nk 的 序列 , 使 pnk 一 4 及 onk 一 B. 但 是 , 还 有 V(z) = U(4z + B), 因此 
4 > 0,， 因 为 否则 Y 就 不 是 概率 分 布 . 由 此 推出 , 极限 4 和 B 对 所 有 的 子 序列 是 


相同 的 , 因此 (2.4) 是 正确 的 . > 
例 如果 V 集中 于 一 点 上 , 那么 引 理 就 失效 了 . 因此 , 如 果 pn 一 co 和 on = (一 1)"， 
那么 条 件 (2.4) 不 满足 , 但 (2.5) 对 于 集中 于 原点 上 的 V 是 成 立 的 . > 


两 种 类 型 的 概率 分 布 序 列 {Fn} 是 如 此 经 常 地 出 现 , 以 致 于 应 当 给 它们 各 自 起 
一 个 名 称 . 为 记号 明晰 计 , 我 们 在 形式 上 以 随机 变量 Xn 来 陈述 定义 , 但 是 概念 实 
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际 上 只 涉及 它们 的 分 布 F. 因此 ,在 不 引用 任何 概率 空间 的 情况 下 ,定义 是 有 意 
义 的 . 
定义 1 如 果 对 于 任 一 e > 0， 


P{lXn| > e} 一 0, (2.6) 


那么 称 Xn 依 概 率 趋 于 0, 我 们 用 Xn 马 0 表示 . 

Xn 号 入 与 Xn 一 久 马 0 有 相同 的 意义 

注意 , 为 使 (2.6) 成 立 , 当 且 仅 当 分 布 F 趋 于 集中 在 原点 上 的 分 布 . 但 是 , 一 
般 说 来 ,， Fn 一 忆 不 蕴含 关于 X1,X2,… 的 收敛 性 的 任何 结论 . 例如 , 如果 Xi 是 具 
有 共同 分 布 F 的 独立 随机 变量 , 那么 Fn 下. 但 是 序列 {X} 不 依 概率 收敛 . 下 
列 简单 引 理 经 常用 到 ， 但 不 总 是 明显 地 指出 来 .( 例 如 , 在 第 1 卷 第 10 章 中 所 用 的 
截 尾 方法 ,实际 上 依赖 于 下 列 引 理 .) 
引 理 2 用 Fn 和 Gn 表示 Xn 和 Yi 的 分 布 . 假设 


Xn 一雄 呈 0，Gn 一 G. 


那么 也 有 Fn 一 G. 

特别 地 , 如果 Xn 号 Xi, 则 Fs 一 下, 其 中 下 是 久 的 分 布 . 
证 如 果 Xn < z, 那么 Y< z+e, 或 者 Xn 一 Y < 一 <. 后 一 事件 的 概率 趋 于 0， 
因此 对 于 所 有 充分 大 的 n，Fn(z) < Gn(z + 6) +e. 同样 的 论证 导致 相反 方向 的 类 
似 不 等 式 . [ 
定义 2 ”如 果 对 于 每 个 e > 0, 存在 一 个 a, 使 得 对 于 所 有 充分 大 的 mi， 有 


P{|Xn| > a} < 6, (2.7) 


那么 称 序列 {Xn} 是 随机 有 界 的 . 

这 个 概念 同样 适用 于 高 维 空间 中 的 分 布 和 随机 向 其 Xn. 

正常 收敛 序列 显然 是 随机 有 界 的 ， 而 非 正 常 收敛 排除 了 随机 有 界 性 . 因此 , 我 
们 有 一 个 平凡 但 有 用 的 准则 : 如 果 分 布 Fn 收敛 ， 那 么 极限 已 是 正常 分 布 ， 当 且 
仅 当 {Fn} 是 随机 有 界 的 . 如 果 {Xn} 和 {Yh} 是 随机 有 和 界 的 , 那么 {Xn 十 丈 } 也 
是 随机 有 界 的 . 实际 上 ， 只 有 当 |Xn| > a 与 |Y| > a 二 者 中 有 一 发 生 时 ， 事件 
|Xn 十 Yn| > 2a 才 有 可 能 发 生 , 因此 


P{Xn + Yh| > 2a} < P{IXn| > a} + P{lYs| > o}. (2.8) 
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8.3 ”作为 算 子 的 分 布 


点 函数 u 和 概率 分 布 下 的 卷 积 UV = Fu 在 5.4 节 中 已 定义 ， 如 果 我 们 用 
at(z) = ult 一 Zz) 定义 一 个 函数 族 {u:}, 那么 可 把 值 V(t) 表示 为 期 望 


v= {utr = Bt) G8.) 


我 们 由 它 来 推导 一 个 正常 收敛 准则 .” 它 是 以 具有 极限 u( 土 wo) 的 连续 函数 类 
C[-oo, oo] 为 基础 的 ,因为 这 样 的 函数 是 一 致 连续 的 . 
定理 1 为 使 概率 分 布 玉 的 序列 正常 收效 于 一 概率 分 布 屎 ， 当 且 仅 当 对 于 每 个 
4 E CI[-oo, ool, 卷 积 Un = 琴 碎 尼 一 致 收 化 于 一 极限 U. 在 这 种 情况 下 , U = 下 让 UU. 
证 条 件 是 必要 的 , 因为 4 的 一 致 连续 性 蕴含 函数 族 {ut} 等 度 连续 性 , 因而 根据 
上 面 的 系 , 一致 地 有 Un 一 克 u. 反之 , 定理 的 条 件 保证 了 期 望 En(u) 的 收敛 , 我 
们 在 第 1 节 中 已 看 到 , 这 蕴含 Fn 一 已 ， 但 还 需 证 明 FF 是 正常 的 . 为 此 , 我们 利用 
第 1 节 的 准则 1. 

如 果 忌 从 0 单调 增加 到 1, 那么 每 个 Un 也 从 0 单调 增加 到 1. 由 一 致 收敛 性 , 存 
在 这 样 的 N, 使 得 对 > N 及 所 有 的 z,|Dn(z) 一 Uw(z)| < = . 选取 o 为 这 样 大 , 使 
得 UN(-a) < e.Uw 由 形 如 (3.1) 的 卷 积 所 确定 ; 把 积分 区 间 限 制 于 -oo < y < -2a， 
我 们 看 到 , 对 于 n> N， 

2e > Un(~a) > u(a)Fn(—2a). 

因为 4 增加 到 1， 所 以 对 于 充分 大 的 n 和 a，Fn(-a) 要 多 小 有 多 小 . 四 
同样 的 论证 适用 于 1 -F(a), 因此 由 准则 1 知 FF 是 正常 的 . 

为 了 说 明 最 后 这 个 结果 的 威力 , 我 们 来 推导 一 个 重要 的 分 析 定 理 ， 它 的 证 明 在 
现在 的 概率 背景 下 变 得 特别 简单 .( 关 于 典型 的 应 用 , 见习 题 10.) 
例 (a) 一般 通 近 定理 . 对 于 任 一 概率 分 布 G, 我 们 有 一 分 布 族 {Gh}, 其 中 Gh 与 G 
只 是 尺度 参数 有 所 不 同 : Gh(z) = G(z/h). 当 产 一 0 时, 分 布 Gs 趋 于 集中 在 原点 上 
的 分 布 ,因此 根据 上 一 定理 ， 对 于 每 个 Le C[ 一 oo, oo], Gh 次 U 一 收敛 是 一 致 的 9. 


@ 为 了 直接 验证 ， 注意 
+o0 
Gua) ut) = {ele = -uOIGEay/A). 
对 于 给 定 的 < > 0， 存 在 这 样 的 6， 使 得 在 每 个 长 度 为 25 的 区 间 内 ，u 的 波动 小 于 e， 于 是 
/ js 一共 一 wD 上 IG{du/h} < ,因为 Gh 旦 于 |y| > 5 一 个 当 h 一 0 时 趋 于 和 的 质量 ， 所 
I 
以 


/ee ~ utay/h} —0. 
> 
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如 果 G 有 密度 9， 那么 Gh 太 v 的 信 为 
和 
Grud = {~ ute (SF ) aw G2 


当 g 有 有 界 导 数 时 , 这 对 Gh 也 是 正确 的 , (3.2) 可 在 积分 号 下 取 微 分 . 取 9 为 正 态 
密度 , 我 们 得 到 : > 
通 近 定理 ”对 于 每 个 we C[-o0,oo], 存在 无 穷 可 徽 的 ve C[ 一 oo co], 使 得 对 于 所 
有 的 zlu(z) 一 v(z)l < e. > 

在 本 节 中 ,把 笨拙 的 卷 积 符号 女 换 成 一 个 比较 简单 的 记号 是 合 平 需要 的 , 这 
个 记号 强调 在 (3.1) 中 分 布 F 是 作为 把 4 变 成 0 的 算 子 的 . 这 个 算 子 以 德 文字 母 
针 表 示 , 我 们 约定 , UV = gu 即 表示 U = F 太 u. 只 有 当 它 与 其 他 类 型 的 算 子 同时 出 
现时 , 才 可 以 看 出 这 种 表面 上 的 故 作 玄 虚 的 真正 优点 , 于 是 很 容易 看 清楚 ,分 布 是 
起 着 它 原先 的 概率 作用 , 还 是 只 作为 一 个 分 析 算 子 出 现 (即使 这 种 细微 的 区 分 也 可 
以 在 分 布 本 身 中 间 导 致 纷乱 ). 由 于 这 个 解释 ,我 们 引入 ， 
记号 的 约定 ”对 每 一 概率 分 布 五 ， 我 们 把 它 与 一 个 从 C[ 一 co, co] 到 自身 的 算 子 从 
对 应 起 来 ， 这 个 算 子 把 函数 尺 变 成 8u = 下 妇 4. 分 布 及 相应 的 算 子 尽 可 能 用 相应 的 
拉丁 字母 和 德 文字 母 表示 . 

照例 , 在 算 子 记号 中 , FCu 表示 多 对 cu 进行 运算 的 结果 , 因此 SC 表示 与 两 
个 概率 分 布 的 卷 积 下 太 G 对 应 的 算 子 . 特别 地 , gr" 是 与 F"*(F 与 本 身 的 n 重 卷 积 ) 
对 应 的 算 子 . 
例 (b) “如果 HH。 表示 集中 于 a 上 的 原子 型 分 布 ,那么 1。 是 平移 算 子 gou(z) = 
u(a 一 Zz). 特别 地 , 5o 是 恒 等 算 子 : ou = 小 

我 们 现在 把 有 界 函 数 4 的 范 数 | 4 | 定义 为 


ull= suplu(z)]. (3.3) 


利用 这 个 记号 , 陈述 “un 一 致 地 收敛 于 u” 可 简化 为 | un 一 4 一 0. 注意 , 范 数 满 
足 容易 证 明 的 三 角形 不 等 式 | 4 十 v 有 <ul ++ 中. 

一 个 算 子 了 称 为 有 界 的 ， 如 果 存 在 一 个 常数 a, 使 得 上 Tu I< a 上 ull, 具有 这 
个 性 质 的 最 小 的 数 称 为 T 的 范 数 , 记 为 了 外 利用 这 些 记号 , 与 分 布 函 数 对 应 的 
线性 算 子 的 主要 性 质 是 ， 

它们 是 正 的 , 即 > 0 蕴含 Su > 0. 它们 有 范 数 1, 这 蕴含 


| Bu ll<| all. (3.4) 
最 后 , 它们 是 可 交换 的 , 即 Se = cf. 
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定义 了 如 果 人 和 和 从 是 分 别 与 分 布 画 数 Fi 和 下 对 应 的 算 子 ,那么 当 且 仅 当 对 于 
每 个 we C[--oo,oo]， 
| 和 ou 一 人 | 一 0 (3.5) 

时 ,我们 记 Sn 一 从 

换 句 话说 ,如 果 一 致 地 有 瓦 妈 4 一 玉 去 4， 那么 gr 一 和. 定理 1 现在 可 以 重新 
叙述 如 下 . 
定理 la 本 正常 收 伊 于 忆 , 当 且 仅 当 gr 一 全 

下 列 引 理 是 基本 的 . 它 具有 代数 不 等 式 的 形式 , 并 说 明了 新 记号 的 富有 启发 性 
的 威力 . 
引 理 1 对 于 与 概率 分 布 对 应 的 算 子 ， 


和 ou 一 ElEu |<) Bu — El + $2 ~ Eaul. (3.6) 

证 左 端 的 算 子 等 于 (3 El)82 + ($2 一 E2)E1，(3.6) 可 由 三 角形 不 等 式 与 $2 和 

El 的 范 数 < 1 这 个 事实 推出 . 注意 , 这 个 证 明 也 适用 于 亏损 概率 分 布 . > 
(3.6) 的 直接 推论 是 ， 


定理 2 ” 设 概率 分 布 序列 { 及 } 和 {Gn} 分 别 正常 收效 于 开 和 G, 则 
本 克 Gn 一 正直 G (3.7) 


(根据 F 太 G 的 定义 ,收敛 是 正常 的 . 如 果 已 或 G 是 亏损 的 ,那么 定理 不 成 立 . 见 
习题 9.) 

作为 第 2 个 应 用 , 我 们 来 证 明 ， 如 果 把 函数 4 的 类 限制 到 具有 各 阶 导数 的 较 
好 的 函数 所 成 的 类 上 , 定理 1 仍然 成 立 . 这 样 我 们 就 得 到 更 灵活 的 : 
准则 1 设 是 概率 分 布 . 如 果 对 于 每 个 无 穷 可 徽 的 9 ye C[-00,o0], 序列 {Snv} 
一 致 收敛 ， 那 么 存在 一 个 这 样 的 正常 概率 分 布 局, 使 得 书 , 一 已 . 
证 在 例 (a) 中 已 证 明 , 对 给 定 的 ue CI-oo,col 和 < > 0, 存在 一 个 无 穷 可 微 的 v 
使 得 上 4 一 v < s, 根据 三 角形 不 等 式 ， 


站 总 一 等 ma | 和 | nu 一 Fnv | + Bnv — Smo + | Smv — Gm) (3.8) 
右 端 第 1 项 和 最 后 一 项 都 < <， 根 据 假设 ， 对 充分 大 的 n,m, 中 间 项 < e. 于 是 
{Snu} 一 致 收敛 , 根据 定理 1, Fn 一 下. p 


@ 利用 巴 拿 赫 (Banach) 空间 的 术语 ，(3.5) 称 为 强 收 生性 . 注意 , 它 并 不 蕴含 | 和" 一 省 || 一 0. 例 
如 , 如 果 Fn 集中 于 1/n 上 , 音 是 恒 等 算 子 ,那么 客 nu(z) 一 多 ur(z) = v(z 一 n-!) 一 u(z), (3.5) 
成 立 , 但 || 售 n 一 售 | = 2, 因为 存在 函数 |v| < 1, 使 v(0) = 1,v(n-!) = 一 1. 

@@ 这 表示 任意 阶 的 导数 存在 且 属 于 C[ 一 co, oo]. 
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利用 在 (1.1) 中 定义 的 Ps 和 E, 同样 的 论证 可 得 出 ， 
准则 2 设 ,和 下 是 正常 概率 分 布 ， 如果 对 于 每 个 在 无 穷 远 处 等 于 0 的 无 穷 可 
徽 函 数 v,En(v) 一 Elo), 那么 Fn 一 已 

根据 归纳 法 ,基本 不 等 式 (3.6) 可 推广 到 具有 多 于 2 项 的 卷 积 上 去 ; 为 了 引用 
容易 , 我 们 把 明显 的 结果 写成 : 
引 理 2 设 让 = 信 …Bn, 切 = GB1.…G@n, 其 中 徊 ) 和 6G@j 与 概率 分 布 对 应 ,那么 


Niu -ul< Dl Bu Gjul. (3.9) 
j=1 


特别 地 ， 
Iu 6" ls nl Bu- Gul. (3.10) 


(关于 应 用 , 见习 题 14 和 习题 15.) 
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中 心 极限 定理 建立 了 使 独立 随机 变量 之 和 是 渐 近 正 态 分 布 的 条 件 ， 它 的 作用 
和 意义 已 在 第 1 卷 10.1 节 中 部 分 地 得 到 说 明 , 并 且 我 们 已 在 一 些 场合 应 用 过 它 [最 
后 是 在 6.11 节 例 (g) 中 ]. 它 在 概率 论 中 占有 很 高 的 地 位 , 这 个 地 位 是 由 于 它 的 悠久 
历史 ， 以 及 它 在 理论 发 展 过 程 中 起 过 的 和 在 应 用 中 还 在 起 着 的 富有 成 果 的 作用 而 
取得 的 . 因此 , 可 以 利用 中 心 极限 定理 作为 比较 我 们 所 采用 的 各 种 方法 之 范围 的 实 
例 . 为 此 , 我 们 将 给 出 几 种 证 明 , 更 系统 的 讨论 (包括 充分 必要 条 件 ) 将 在 第 9、15 
和 16 章 中 看 到 . 目前 的 讨论 使 我 们 离开 了 主题 , 它 的 目的 是 以 一 个 惊人 的 和 重要 
的 例子 来 说 明 算 子 术语 的 优点 . 此 外 , 许多 读者 将 希望 对 最 简单 的 背景 下 的 中 心 极 
限定 理 给 出 一 个 容易 理解 的 证 明 . 不 惜 有 一 些 重复 , 我 们 从 一 个 特殊 情形 开始 . 
定理 1 (Ri 中 的 同 分 布 情形 .) 设 Xi,X2,… 是 具有 共同 分 布 已 的 独立 随机 变量 . 
假设 
E(Xk) = 0， Var(Xk) =1. (4.1) 


当 n 一 00 时 , 正规 化 和 
Si = (Xi1+**+ Xn)/Vn (4.2) 


的 分 布 起 于 具有 密度 n(z) 二 e-3” /V3 的 正 态 分布 名 
用 纯 分 析 的 术语 来 说 , 对 于 期 望 为 0、 方差 为 1 的 分 布 F， 


F"™*(zVn) 一 R(z). (4.3) 
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为 了 证 明 , 我 们 需要 如 下 的 : 
引 理 ”如 果 人 Bn 是 与 Fn(7Z) = F(ZVn) 对 应 的 算 子 , 那么 对 于 每 个 具有 三 阶 有 界 导 
数 的 EC[--00,o0], 在 直线 上 一 致 地 有 


mg 一 可 一 3 (4.4) 
证 因为 E(X2) =1, 所 以 我 们 可 以 由 下 式 定义 一 个 正常 概率 分 布 F#: 
FH {dy} = ny Fn {dy} = ny?F{Vndy}. (4.5) 


变量 代 换 Viniy = s 表明 F# 趋 于 集中 在 原点 上 的 分 布 . 由 (4.1) ， 关 于 (4.4) 中 两 
边 之 差 , 我 们 有 
nlBnu(a) 一 wa] 一 ju) 
广 | 择 一 切 一 wu(z) + yu'(z) 
J-w 加 
分 子 的 泰勒 展开 式 说 明 , 对 于 ly| < e, 被 积 函数 由 


-$e@| eta 9) 


T 
st le < el 


所 控制 对 于 所 有 的 y, 被 积 函数 由 |w” || 所 控制 . 因为 F# 趋 于 集中 在 原点 旁 的 
分 布 , 所 以 对 于 充分 大 的 n, 这 个 量 的 绝对 值 小 于 e(w” | 十 w” 由， se 
致 趋 于 0. 

定理 1 的 证 明 ”以 @ 和 @，" 分 别 表示 与 正 态 分 布 只 (z) 和 NN(zVn) 对 应 的 算 子 . a 
是 根据 基本 不 等 式 (3.10)， 


[Su Gu l=| Sau 一 eu 
<nl|om— Grul<nl| da ultnl Gnu—ull. (4.7) 


按照 上 一 引 理 , 右边 趋 于 0, 从 而 根据 8.3 节 的 准则 1, $7 一 6. 
例 (a) 具有 无 穷 方 差 的 中 心 极限 定理 ， 只 要 选择 适当 的 正规 化 常数 ,定理 1 的 
证 明 也 完全 适用 于 某 些 不 存在 方差 的 分 布 , 注意 到 这 一 事实 具有 方法 论 的 意义 . 例 
如 ， 如 果 Xk 具有 这 样 的 密度 f, 当 lz| > 1 时 , f(z) = ?lzl-s in lzh 当 Iz| <1 
时 , f(z) = 0, 那么 (Xi 十 … 十 Xn)/(Van ln mn) 有 正 态 极限 分 布 ，( 证 明 只 需 作 明显 
的 改变 .) 关于 正 态 极限 的 充 要 条 件 将 在 9.7 节 及 17.5 节 中 给 出 . p> 
这 种 证 明 方 法 具有 广泛 的 应 用 范围 . 习题 16 可 作为 很 好 的 练习 . 此 处 我 们 利 
用 这 个 方法 在 更 一 般 的 背景 下 证 明 中 心 极限 定理 . 下 列 定理 在 形式 上 是 对 二 维 空 
间 令 述 的 , 但 在 R7 中 也 成 立 . 
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定理 2 (多 元 的 情形 ). 设 {Xn} 表示 具有 共同 分 布下 的 相互 独立 二 维 随机 变量 序 
列 . 设 期 望 为 0, 协 方差 矩阵 为 

可 ( of poo2 让 da) 

potoz 3 

当 n 一 00 时 ， (Xi 十 … 十 Xn)/Vni 的 分 布 趋 于 具有 期 望 为 0, 协 方差 答 阵 为 C 的 
二 元 正 态 分布 . 
证 ”如果 使 用 3.5 节 中 的 矩阵 记号 , 那么 证 明 不 需要 本 质 上 的 改变 . 因为 下 标 已 经 
太 累 效 了 , 所 以 我 们 以 行 向 量 z = (ztD,zG)) 表示 平面 上 的 点 . 于 是 wz) 表示 二 元 
函数 ， 我 们 以 下 标 表示 它 的 偏 导数 . 因此 , w = (ua,ua) 是 一 个 行 向 量 , w= (wj,) 
是 一 个 对 称 的 2 x 2 矩阵 . 利用 这 个 记号 , 泰勒 展开 式 为 


uz —Y) = uz) — yu (zr)+ ju" (a)yT + (4.9) 


其 中 性 是 y 的 转 置 , 即 含 有 分 量 y,y 的 列 向 量 , 与 (4.5) 类 似 , 我 们 由 下 式 定 
义 一 个 正常 概率 分 布 : 


砸 (tj 一 nl) PtVidy}， 其 中 2 全 = 到 + 下 
1 2 
如 同上 面 的 证 明 屠 梯 ，F# 趋 于 集中 在 原点 上 的 概率 分 布 4.6) 对 应 于 恒等式 
nlBnu(e) ~ un)] ~ mo) 


ue -WD) — us) + yz) — Sp"(o)y™ 


a ry] “FP#{dy), (4.10) 
其 中 中 
mm(z) = E(yu"(z)yT™) 
= nl(z)o3 + 2u12(7)poip2 + u22 (2)o2. (4.11) 
(此 处 卫 表 示 关 于 下 的 期 望 ,) 由 (4.9), 被 积 函数 趋 于 0. 如 同上 一 引 理 中 那样 , 可 
以 看 出 一 致 地 有 mlgnw 一 可 一 m, 定理 的 证 明 不 需要 改变 . > 


例 (b) d 维 中 的 随机 游 动 . 设 X1,X2,… 是 具有 如 下 所 述 共同 分 布 的 独立 随机 向 
量 . Xk 具有 在 1.10 节 的 意义 下 的 随机 方向 , 长 度 工 是 满足 E(L?) = 1 的 随机 变量 . 


@ 显然 ， mm 是 乘积 Cu'” 的 迹 (对 角 线 元 素 之 和 ). 这 在 任意 维 空间 中 都 是 正确 的 ，[ 在 一 维 
中 ， m(z)=202u"(z)] 
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由 于 对 称 性 , 协 方差 矩阵 C 是 具有 元 素 o3 = 1/d 的 对 角 和 矩阵 . 正规 化 和 5n/ Vi 的 
分 布 趋 于 协 方差 矩阵 为 C 的 正 态 分 布 . 因此 , 向 量 5S%/Vni 的 长 度 平方 的 分 布 趋 于 
独立 正 态 变量 平方 和 的 分 布 . 在 2.3 节 中 曾 证 明 , 这 个 极限 有 密度 


da 
wa(r) = 一 (4.12) 
2#4-1T (3) 


这 个 结果 说 明了 维 数 的 影响 , 特别 可 应 用 于 随机 飞行 的 1.10 节 例 (e). 
例 (c) 总体 的 随机 扩展 . 作为 上 例 的 经 验 应 用 , 考虑 橡树 总 体 在 史前 时 期 的 扩展 . 
如 果 新 树 仅 是 由 于 成 熟 的 树 落下 的 种 子 产生 的 , 那么 树苗 应 当 位 于 成 熟 的 树 旁 , 第 
妹 代 的 树 与 其 祖先 的 距离 将 是 渐 近 正 态 分 布 的 . 在 这 些 条 件 下 ,一 颗 橡 树 的 后 高 所 
覆盖 的 面积 大 体 上 与 树 的 年 龄 成 正比 . 观察 表明 , 实际 的 发 展 是 与 这 个 假设 不 符合 
的 . 生物 学 家 们 断言 , 实际 的 扩展 受到 把 种 子 带 到 远 处 的 鸟 的 强烈 影响 . 9 p> 
我 们 着 手 把 定理 1 推广 到 不 同 分 布 的 情形 . 条 件 给 人 们 这 样 的 印象 , 即 它们 是 
为 了 使 同样 的 证 明 仍然 有 效 这 一 唯一 目的 而 人 为 地 引进 的 . 实际 上 , 这 些 条 件 也 是 
使 具有 (4.17) 中 所 用 的 古典 正规 化 的 中 心 极限 定理 成 立 的 必要 条 件 . ( 见 15.6 节 .) 
定理 3 ( 林 德 伯 格 (Lindeberg))@ . 设 XX1,X2,… 是 具有 分 布 下 , 瑟 ,… 的 相互 独立 
一 维 随机 变量 , 且 


E(Xk)=0, Var(X)=o?. (4.13) 
并 令 62 一 of 十 … 十 o2. (4.14) 
假设 对 于 每 个 上 > 0， 人 
2 有 fdy} 一 0， 4.15 
> 人 do (4.15) 
或 等 价 地 
2 Fe{dy} — 1. . 
> hi ma (4.16) 
那么 正规 化 和 
Sn = (XI 十 … 十 Xn)/sn (4.17) 


@® J. G. Skellam, Biometrika, vol. 38(1951) pp. 196-218. 

@ J.W. Lindeberg, Math. Zeit., vol. 15(1922) pp. 211-235. 特殊 情形 及 变形 以 前 已 知道 了 , 但 
是 Lindeberg 给 出 了 包含 定理 1 的 第 一 个 一 般 形式 . 费 勒 在 同一 期 刊 ,vol. 40(1953) 证 明了 具有 
古典 正规 化 的 林 德 伯 格 条 件 的 必要 性 ( 见 15.6 节 ). 

林 德 伯 格 的 方法 很 复杂 ， 实 际 上 可 以 用 P. 列 维 发 展 起 来 的 特征 函 孝 方 法 来 代 茶 ， 在 H. F. 
‘Trotter, Archiv. der Mathematik, vol. 9(1955) pp. 226-234 中 证 明了 , 利用 现代 的 方法 , 可 以 
用 简单 直观 的 方式 给 出 林 德 伯 格 方法 . 本 节 的 证 明 利用 了 特 罗 特 (Trotter) 的 想法 
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的 分 布 起 于 具有 期 望 0、 方差 1 的 正 态 分 布 外 
林 德 伯 格 条 件 (4.15) 保证 各 个 方差 o 在 如 下 所 述 的 意义 上 比 它们 的 和 s2 小 : 
对 于 给 定 的 > 0 和 所 有 充分 大 的 m， 


Ok < Egns k= 1,.-°,n. (4.18) 


事实 上 ，o8/ 吕 显然 小 于 怒 加 上 (4.15) 的 左边 . 取 = 3e, 我 们 看 出 ,(4.15) 北 合 
(4.18). 

定理 3 可 以 用 定理 2 所 指出 的 方法 推广 到 高 维 中 去 . 见习 题 17 ~ 习题 20. 
证 “对 于 每 个 分 布 Pi, 我们 可 以 作 一 个 期 望 为 0 且 与 F 有 相同 方差 2 的 正 态 分 
布 Gi 与 之 对 应 , 于 是 Xe/sn 的 分 布 (zsn) 依赖 于 大 和 n. 我 们 用 从 表示 其 
对 应 的 算 子 . 类 似 地 ，Gkw 与 正 态 分 布 Ge(zsn) 对 应 . 根据 (3.9)， 只 需 证 明 ， 对 于 
每 个 具有 3 阶 有 界 导数 的 ue C[-oo,o0]， 


> | Bknt — Bknu (l= 0. (4.19) 
我 们 如 同 定理 1 那样 进行 ,不 过 现在 把 (4.6) 换 成 ”个 关系 式 
Sinus) — uz) — ee 
-= 人 ee A -mtet (20) 


把 积分 区 间 分 为 ly| < e 和 |y| > e, 利用 像 在 (4.6) 那样 的 估计 ,我 们 得 到 


02 2 
本 se 全 + 人 te (20 
Sn Sn lyl<e 


林 德 伯 格 条 件 (4.15)( 令 t= e) 现在 保证 , 对 于 充分 大 的 mw， 
2 

大 = 工 
对 于 正 态 分 布 Gk, 林 德 伯 格 条 件 (4.15) 作为 (4.18) 的 简单 推论 是 满足 的 ， 因 此 当 
把 Bkn 换 成 Bk,n 时 ， 不 等 式 (4.22) 仍然 成 立 . 把 这 两 个 不 等 式 相 加 ， 我 们 得 到 
(4.19), 这 就 完成 了 证 明 . S: 
例 (d) 的 匀 分 布 令 XX: 在 -ak 与 ak 之 间 是 均匀 分 布 的 [具有 密度 1/(2ak)]. 于 
是 叹 = 3 容易 看 出 , 如 果 ak 有 界 且 3 十 … 十 a2 一 co, 那么 定理 的 条 件 是 满 
足 的 . 实际 上 , 在 这 种 情形 下 , 对 于 所 有 充分 大 的 n, 和 式 (4.15) 恒 等 于 0. 另 一 方 


委 e(llw 外 十 jj 人. (4.22) 


证 
kinu 一 一 5 三 
2s2 


232 第 8 章 基本 极限 定理 


面 , 如果 2ag < co, 那么 sa 有 界 ，(4.15) 不 能 成 立 , 在 这 种 情形 下 ,中 心 极限 定理 
不 适用 .( 然 而 ,我 们 得 到 将 在 8.5 节 中 研究 的 无 穷 郑 积 的 一 个 例子 .) 

中 心 极限 定理 不 成 立 的 一 个 不 大 明显 的 情形 是 只 一 .于 是 3o8 211 一 2 < 
303， 显然 如 果 + < TD0, 那么 (4.15) 左 端 > 了 这些 例 于 说 明 ，(4.15) 用 来 保证 各 
个 Xk 是 浙 过 可 忽 咯 的 : 任 一 项 x 与 5。 同 阶 的 概率 应 当 趋 于 0 
例 (e) 有 界 变量 假设 X 是 一 致 有 界 的 ， 即 所 有 的 分 布 F 都 集中 在 某 一 有 限 
区 间 =wa 上 . 于 是 , 当 且 仅 当 sn 一 co 时 ,宁德 伯 格 条 件 (4.15) 满足 
例 (f) 令 下 是 期 思 为 0、 方差 为 1 的 概率 分 布 . 选择 一 个 正 数 o4 的 序列 ， 并 令 
到 (w) = F(z/on) (从 而 Fc 有 方差 o3). 林 德 伯 格 条 件 满足 ， 当 且 仅 当 sn o0， 且 
on/sn 一 0. 实际 上 , 我 们 知道 , 这 些 条件 是 必要 的 . 另 一 方面 ，(4.15) 的 左边 化 为 

so 1/ z2F{dz}. 


kt Jizl<tenyor 


在 所 述 条件 下 ,sn/ok 对 上 = 1,…,n 一 致 地 趋 于 co ,因此 对 于 充分 大 的 n， 人 
出 现 的 所 有 积分 将 < <. 这 表示 和 < es2, 因此 (4.15) 是 正确 的 . 


注意 到 以 下 内 容 是 有 方法 论 意义 的 : 同样 的 证 朋 广 法 即使 对 蘑 丝 琐 电 不 存在 
的 随机 变 基 序列 也 适用 , 但 是 正规 化 因子 当然 是 不 同 的 . 我 们 将 在 15.6 节 中 回 到 这 
个 问题 . 在 那里 , 我 们 将 更 进一步 分 析 林 德 伯 格 条 件 的 本 质 .( 见 习题 19 和 习题 20.) 

我 们 用 关于 随机 和 的 中 心 极限 定理 一 种 形式 来 结束 这 个 研究 , 其 想法 如 下 . 如 
果 在 定理 1 中 我 们 把 固定 的 项 数 n 换 成 期 望 为 n 的 泊 松 变量 N, 那么 Sy 的 分 布 
似乎 仍 应 趋 于 名. 在 物理 学 和 统计 学 中 , 当 观 察 的 次 数 不 是 事先 固定 的 时 候 , 就 会 
出 现 类 似 的 情况 . 

我 们 只 考虑 形 如 Sw = Xi 十 … 十 XN 的 和 , 其 中 Xi 和 N 是 相互 独立 的 随机 
变 基 . 我 们 假设 Xi 有 共同 分 布 F， 且 期 望 为 0, 方差 为 1. 利用 8.2 节 的 记号 , 我 
们 有 : 
定理 49 (随机 和 ). 设 Ni, N2,… 是 正 整数 值 随机 变量 , 使 得 


nNnDl. (4.23) 


@ 关于 向 相依 Xi 的 推广 , 见 P. Billingsley, Limit theorems for randomiy selected partial sums, 
Ann。Math。Statist.，vol，33(1963) pp，85-92. 在 去 掉 (4.23) 的 时 候 ， 我 们 得 到 一 个 具有 
新 形式 的 极限 定理 . 见 H. E. Robbins, The asymptotic distribution of the sum of a random 
number of random variables, Bull. Amer. Math. Soc., vol. 54(1948) pp. 1151-1161. 

对 于 中 心 极限 定理 向 其 他 类 型 的 相依 变量 的 推广 , 读者 可 参考 洛 埃 书 (Lo&ve) 的 书 .( 对 于 可 交 
换 变量 , 见习 题 21.) 
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于 是 SN /Vn 的 分 布 赵 于 贷 . 

一 个 有 趣 的 特点 是 Sy, /VR 未 被 正规 化 为 方差 为 1 的 随机 变量 . 事实 上 , 这 
个 定理 适用 于 E(Nn) = oo 的 情形 ,甚至 也 适用 于 期 望 存在 的 情形 ，(4.23) 不 蕴含 
n-1E(Nn) 一 1. 正规 化 为 方差 为 1 的 随机 变量 也 许 是 不 可 能 的 ,在 这 种 正规 化 是 
可 能 的 时 候 , 它 使 证 明 变 复杂 了 . 
证 为 了 避免 二 重 下 标 , 我 们 记 P{N。 = 此 = ak, 并 理解 为 a 依赖 于 n. 与 Swn 
对 应 的 算 子 由 形式 上 的 敌 级 数 Pac8* 给 出 如同 定 理 1 的 证 明 中 那样 , 令 名, 是 
与 F(XVn) 对 应 的 算 子 . 因为 FR* 一 名， 所 以 只 需 对 每 个 具有 3 阶 有 界 导数 的 
4 EC[-oo,oco], 证 明 一 致 地 有 


bp» arBhu — Bau — 0. (4.24) 
k=1 
利用 明显 的 因 式 分 解 和 基本 不 等 式 (3.9), 可 以 看 出 
lSsu — ull < NG" — wll < Ik — nl :lSnw ~ ll. (4.25) 


由 (4.23), 只 要 n 充分 大 , 满足 |k 一 n| > en 的 系数 ak 之 和 就 小 于 <. 对 于 这 样 的 
mw (4.24) 左边 的 范 数 为 


四 
< Daxrllstu ~ Snull < 2e: lull + 2e.nll 和 nu 一 zl (4.26) 
、 大 : 


在 引 理 的 证 明 中 ,我 们 已 经 看 到 ， 对 于 所 有 充分 大 的 mn， 右边 < 2cllull + allu， 
因此 (4.24) 一 致 地 成 立 . > 
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下 列 定 理 是 由 于 其 固有 的 重要 性 而 给 出 的 ， 而 且 因 为 它 是 我 们 的 准则 起 作用 
的 好 例子 . 较 强 的 形式 可 在 7.8 节 、9.9 节 及 17.10 节 中 找到 . 

我 们 用 Xi1,X2,… 表示 具有 分 布 所 , E,… 的 相互 独立 变量 ， 假 设 E(Xj) = 
0, 品 = E(X8) 存在 . 
定理 ”如 果 o2 = Za8 < co, 那么 部 分 和 Xi 十 … 十 Xn 的 分 布 DGn 越 于 期 望 为 0、 
方差 为 o2 的 概率 分 布 G. 


* 本 节 在 后 面 用 不 到 - 
@ 在 7.8 节 中 曾 指出 ,随机 变量 Sn 趋 于 一 个 极限 . 
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证 “为 证 明正 常 极 限 G 的 存在 性 ， 只 需 (8.3 节 定理 1) 证 明 ， 对 于 无 穷 可 微 的 
4E C[-00,00], 函数 全 $2… 从 nt 的 序列 当 n 一 co 时 收敛 就 够 了 .现在 对 于 n> m， 
根据 明显 的 因 式 分 解 


ll81 nu — $1 Smull < | 一、 (5.1) 
因为 E(Xk) = 0, 所 以 有 恒等式 


十 oo 
Sule) ua) = {le = uo) + ve (ore(ay). (5.2) 


按照 2 阶 泰勒 展开 式 , 被 积 函 数 的 绝对 值 < wy, 从 而 5x4 一 < 骂 悼 因 
此 ,根据 基本 不 等 式 (3.9), 量 (5.1) < (o%+1 十 … 十 of) lh， 于 是 存在 一 个 正 
常 分 布 G, 使 得 Gn 一 G. 因为 Gn 有 方差 喇 十 … 十 吕 ， 所 以 G 的 二 阶 矩 存在 
且 < o2. 按照 8.1 节 例 (e) 中 的 准则 , 这 蕴含 着 G 之 期 望 为 0. 最 后 , G 是 Gn 和 
Xn+1 十 … 十 Xn+k 的 极限 分 布 的 卷 积 , 因此 G 之 方差 不 能 小 于 Gn 的 方差 . 这 就 
完成 了 证 明 . > 
例 (a) 在 1.11 节 例 (c) 中 , 在 0 与 1 之 间 的 点 的 随机 选择 根据 逐次 投 硬币 的 结果 
决定 . 用 现在 的 术语 来 说 ,这 意味 着 把 均匀 分 布 表 为 无 穷 乘积 .1.11 节 例 (d) 说 明 ， 
相应 的 偶数 项 的 无 穷 卷 积 是 奇异 分 布 ( 见 17.10 节 ). 

例 (b) 设 丈 是 独立 的 ， 并且 E(CA) = 0 BE( 吏 ) =1, 于 是 如 果 2 妈 < co, 那么 
beXi 的 部 分 和 的 分 布 收敛 . 在 3.7 节 讨论 正 态 随机 过 程 时 利用 了 这 个 事实 . 

例 (c) 在 纯 生 过 程 中 的 应 用 . 设 Xn 是 具有 密度 ne x't 的 正 变量 , 于 是 E(Xn) = 
VVar(Xn) = Xi!L. 在 m= M1 < oo 的 情形 ,定理 适用 于 中 心 化 变量 Xn -和 1. 
这 个 结果 导致 了 曾 在 第 1 卷 的 17.3 节 和 17.4 节 中 叙述 的 发 散 纯 生 过 程 的 概率 解 
释 .“ 质 点" 以 逐次 跳 唉 的 方式 移动 , 逗留 时 间 X1,X2,… 是 独立 的 按 指数 分 布 的 变 
量 . 此 处 Sn = Xi 十 … 十 Xn 表示 第 n 次 跳跃 的 时 刻 . 如 果 limE(Sn) = m < co, 那 
么 Sn 的 分 布 趋 于 正常 极限 G. 于 是 , G(t) 是 在 时 刻 t 前 将 发 生 无 穷 多 次 跳跃 的 概 
率 . 

例 (d) ”对 于 在 噪声 、 占 线 问 题 等 中 的 应 用 ， 见 习题 22. > 


8.6 选择 定理 


证 明 数 列 收敛 性 的 标准 方法 是 , 首先 证 明 至 少 有 一 个 聚 点 存在 , 其 次 证 明 其 唯 
一 性 . 类 似 的 手续 适用 于 分 布 ， 如 下 属于 黑 利 (Helly) 的 重要 定理 提供 了 聚 点 的 类 
似 物 . 本 节 的 所 有 定理 是 与 维 数 无 关 的 (特殊 情况 曾 在 第 1 卷 11.6 节 中 使 用 过 )- 
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定理 1 (i) Rr 中 的 每 个 概率 分 布 序列 {Rk} 具有 一 个 (正常 或 非 正 常 的) 收敛 于 一 
极限 的 子 序列 Fh, Fns，……… 
(ii) 所 有 这 样 的 极限 是 正常 的 。 当 且 仅 当 {Ri} 是 随机 有 界 的 ( 见 8.2 节 定义 2). 
( 诞 ) Fh 一 下， 当 且 仅 当 每 个 收敛 子 序列 的 极限 等 于 下 . 
证 明基 于 如 下 ， 
引 理 “ 设 a1,42,… 是 任意 一 个 点 列 . 每 个 数值 画 数 序列 fun} 包含 一 个 在 所 有 的 
点 gj 上 都 收敛 (可 能 趋 于 士 oo) 的 子 序列 Uniyamna，…… 
证 ”我 们 利用 G. 康 托 的 “对 角 线 方法 ”. 可 以 找到 这 样 一 个 序列 wuwz,…, 使得 
值 ww(ai) 的 序列 收敛 . 为 了 避免 复杂 的 指标 ， 我 们 令 ub) = wo。，, 因此 {ubh} 是 
{un} 的 子 序列 且 在 特殊 点 a; 上 收敛 . 我 们 从 这 个 子 序列 中 取出 另 一 个 在 点 a2 上 
收敛 的 子 序列 人 ,名 ,,… 利用 归纳 法 继续 进行 下 去 , 我 们 对 于 每 个 n, 得 到 了 一 
个 在 点 on 卡 收 租 昌 包 全 在 前 一 序列 中 的 序列 uA ,au 如 ，，… 现在 考虑 对 角 线 序列 
aa 名，… 除 其 前 n 一 1 项 外 ， 这 个 序列 包含 在 第 n 个 序列 ,中 名 ,… 中 ， 
从而 它 在 as 下 收敛 这 对 每 个 n 都 是 正确 的 , 因而 对 角 线 序列 fu 外) 和 有 
alya2，…… 上 收敛 , 引 理 得 证 . 
定理 1 的 证 明 (i) 选 {a;} 为 一 个 处 处 稠密 的 序列 , 并 选择 一 个 在 每 个 点 aj 上 部 
收敛 的 子 序列 {F%,}. 以 G(a;) 表示 其 极限 . 对 于 不 属于 集合 {oj} 的 任 一 点 z, 我 
们 把 G(z) 定义 为 所 有 使 a; > z 的 G(a;) 之 最 大 下 界 . 这 样 定义 的 函数 G 由 0 增 
加 到 1, 但 它 未 必 是 右 连续 的 , 我 们 只 能 断言 , G(z) 位 于 极限 G(z+) 和 G(x 一 ) 之 间 . 
但 是 ,在 不 连续 点 上 重新 定义 G， 可 以 得 到 一 个 在 所 有 连续 点 上 与 G 一 致 的 右 连 
续 函 数 . 令 z 是 这 样 的 点 , 存在 两 点 ui < z < aj, 使 得 
Gla;) — Gl(ai) <e, Glai) < F(z) < Gla;): (6.1) 


因为 F 是 单调 的 ， 所 以 我 们 有 Fh (ai) < Fn (z) < Fni(a;). 令 k 一 00, 由 (6.1) 
看 出 ， 没 有 序列 {Fn,(z)} 的 极限 点 与 F(z) 之 差 大 于 se ， 因 此 在 所 有 连续 点 上 
Fn (7) = F(z). 

(区 其 次 我 们 已 知道 ,为 使 收敛 的 分 布 序列 是 正常 收敛 的 ， SN 
有 界 的 . 因此 在 已 知 (i) 的 情况 下 , 其 余 的 断言 几乎 是 重复 的 . 

选择 定理 是 极其 重要 的 . 由 下 述 数论 中 的 著名 定理 可 以 看 出 它 的 无 比 威力 ， 市 
且 此 定理 还 提醒 大 家 注意 , 我们 的 概率 术语 绝 不 能 使 得 发 展 起 来 的 理论 的 更 为 广 
泛 的 范围 模糊 不 清 . 
例 (a) 数论 中 的 等 分 布 定 理 .? 设 a 是 一 个 无 理 数 , an 是 na 的 小 数 部 分 . 以 Ne(z) 

@ 此 定理 通常 归功 于 外 尔 (H. Weyl), 虽然 由 波 尔 (Bohl) 和 塞 尔 平 斯 基 (Sierpifiski) 独立 地 发 现 . 见 


G. H. Hardy and E. M. Wright, Theory of number , Oxford, 1945, pp. 378-381, 在 非 概 率 背 
景 下 考虑 此 定理 时 将 增加 证 明 的 困难 . 
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表示 aa, az,……,an 中 < z 的 项 数 . 于 是 对 于 所 有 的 0 < z < ln-LNn(z) 一 z. 

证 “我们 考虑 在 具有 单位 长 度 的 圆 上 的 分 布 及 函数 ; 换 句 话说 , 坐标 的 加 法 被 模 1 
所 约 化 . (在 2.8 节 中 曾 说 明 过 这 个 概念 . 分 布 函数 这 个 方便 工具 在 这 圆 上 变 成 无 意 
义 的 了 , 但 在 测度 的 意义 上 的 分 布 仍 有 意义 .) 令 F, 是 集中 于 ni 个 点 2a ,na 
上 上 且 对 每 个 点 赋 以 概率 1/n 的 原子 型 分 布 . 根据 选择 定理 , 存在 一 个 序列 n,n2,…， 
使 Fn 一 下 , 其 中 下 是 正常 概率 分 布 ( 圆 是 有 界 的 ). 取 FF 与 任意 连续 函数 4 的 卷 
积 , 我 们 得 到 


去 we -am+ue 20a) + + uz — nxo)] = (2). (6.2) 


现在 很 明显 , 把 > 换 为 一 a 并 不 影响 左边 的 渐 近 性 质 , 因此 对 于 所 有 的 2,v(z) = 
ulz 一 a). 这 又 蕴含 ,对 于 大 = 1,2,…,v(z) = v(z - ka). 根据 5.4 节 中 引 理 2 的 
系 , 点 m 2a,… 是 处 处 稠密 的 , 因而 v = const. 于 是 我 们 证 明了 , 对 于 每 个 连续 的 
4 卷 积 次 uw 是 一 个 常数 , 由 此 推出 ,下 应 对 相等 长 度 的 区 间 赋 以 相同 的 数值 , 因 
此 F{7} 等 于 区 间 了 的 长 度 . 其 他 极限 的 不 可 能 表明 ,整个 序列 {Fs} 收敛 于 这 个 
分 布 , 这 就 证 明了 定理 . 我 们 称 已 为 圆 上 的 均匀 分 布 . 
例 (b) 。 答 的 收效 性 . 令 Fn 和 下 是 具有 有 限 的 各 阶 矩 的 概率 分 布 ,分别 以 AW 和 
hx 表示 . 我 们 由 7.3 节 知道 ,不 同 的 分 布 函 数 可 以 有 相同 的 甜 序列 ， 因 此 从 pu 
的 性 质 来 推断 F 一 未 必 总 是 可 能 的 . 但 是 如 果 玉 是 具有 扰 jn1, 42,… 的 唯一 分 
布 , 并 且 如 果 对 于 上 二 1,2,…， p49 一 je， 那么 FE 一 下. 事实 上 ,8.1 节 例 (e) 的 
结果 说 明 {,} 的 每 个 收敛 子 序列 收敛 于 下 . 
例 (c) ”可 分 性 .为 了 简洁 起 见 ,如 果 一 个 分 布 集中 于 有 穷 多 个 有 理 点 上 且 对 每 个 
点 赋 以 有 理 的 质量 ， 则 称 这 个 分 布 是 有 理 分 布 . 任 一 分 布 FP 是 有 理 分 布 序列 {F,} 
的 极限 ， 并 且 我 们 可 以 选择 期 望 值 为 0 的 F。， 因 为 这 可 以 用 加 上 一 个 原子 及 质量 
的 任意 小 量 的 调整 来 达到 . 但 是 只 有 可 数 多 个 有 理 分 布 , 它们 可 以 排列 成 简单 的 序 
列 G1, Ga,…. 因此 存在 一 个 期 望 为 0, 方差 有 限 的 分 布 序列 {Gn}， 使 得 每 个 分 布 
已 是 某 个 子 序列 {Gn} 的 极限 . > 
定理 1 是 以 概率 中 最 常用 的 形式 叙述 的 , 但 做 了 不 必要 的 限制 . 证 明 依赖 于 下 
列 事实 : 满足 所 (-o0) = 0，Fn(o0) = 1 的 单调 函数 序列 {Fs} 包含 一 个 收敛 子 序 
列 . 当 把 条 件 (oo0) = 1 换 成 数列 {F(z)} 对 于 每 个 固定 的 z 是 有 界 的 这 个 较 弱 
的 要 求 时 ， 上 述 结论 仍 成 立 . 于 是 极限 F 是 有 穷 的 , 但 可 能 是 无 界 的 , 其 导出 测度 
在 区 间 -oo0,z 上 是 有 穷 的 , 但 在 =56;755 上 可 能 是 无 穷 的 . 类 似 的 放松 条 件 对 -oo 
也 是 可 能 的 , 我 们 导出 定理 1 的 下 列 推广 , 其 中 符号 mm 一 p 表示 这 关系 式 在 任 一 
有 穷 区 间 上 成 立 . 
定理 2 设 {jim} 是 一 个 测度 序列 ,使得 数列 ln{f 一 z,z} 对 于 每 个 了 是 有 界 的 ， 则 
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存在 一 个 测度 上 和 数列 nl,n2,…… 使 ns 一 凡 

选择 定理 的 变形 对 许多 函数 类 都 成 立 . 特别 有 用 的 是 下 列 定理 , 通常 称 为 阿 斯 
科 里 (Ascoli) 定理 或 阿尔 泽 拉 (Arzela) 定理 . 
定理 3 设 {un} 是 等 度 连续 函数 序列 , 9@ 且 |un| < 1, 则 存在 一 个 收敛 于 一 连续 极 
限 的 子 序列 funk}， 且 收敛 在 每 个 有 限 区 间 上 是 一 致 的 . 
证 再 选择 一 个 所 有 点 oj 的 稠密 序列 和 在 每 个 a; 上 收敛 的 子 序列 {uw}, 以 ula;) 
表示 极限 . 于 是 


un (2) — uns(z)| < lun, (7) — un (02)| 


十 |uns(z) — un, (02)| + lun (03) — un, (a7)|. (6.3) 


根据 假设 , 最 后 一 项 趋 于 0. 由 假设 的 等 度 连续 性 , 对 于 每 个 ?, 存在 这 样 的 点 aj， 
使 得 对 于 所 有 的 nn， 


|un(z) — un(a;)| < e， (6.4) 


并 且 对 任 一 有 穷 区 间 7， 可 选择 有 穷 多 个 a;, 记 为 a;,，,…,4j,, 使 得 对 每 一 ze 也， 
都 有 一 aj,(1 < k 和 m), 使 得 (6.4) 对 此 aj 成 立 . 由 此 推出 , 对 于 所 有 充分 大 的 
和 s，(6.3) 的 右边 < 3e 在 工 上 一 致 成 立 . 因此 , u(x) = limun,(z) 存在 . 由 于 (6.4)， 
我 们 有 ju(z) 一 u(aj)| < <, 这 蕴含 v 的 连续 性 . > 
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设 K 是 集中 于 有 穷 或 无 穷 区 间 2 上 的 随机 核 .根据 6.11 节 中 的 定义 1, 这 表 
示 K 是 两 个 变 基 ( 即 点 > 和 集合 了 ) 的 浮 数 . 对 于 固定 的 , 它 是 z 的 贝尔 函数 ; 
对 于 固定 的 re 2， 它 是 集中 于 8 上 的 概率 分 布 ] 在 高 维 中 , 区 间 9 可 以 换 为 更 
一 般 的 区 域 ,理论 不 需 作 任何 改变 . 

在 6.11 节 中 曾 证 明 , 存在 具有 转移 概率 K 的 马尔 可 夫 链 (Xo, X1,…). 初始 变 
基 Xo 的 分 布 yo 可 以 任意 选取 , 于 是 X1,X2,… 的 分 布 可 由 下 式 递 推 地 给 出 ， 


mn) = [me T). (71) 


@ 即 对 每 个 。 > 0, 有 相应 的 5 > 0, 使 得 当 jz' -- zw| < 6 时 , 对 所 有 的 mw untz') 一 tun(z")| < 


* 之 所 以 讨论 此 材料 ,是 由 于 它 的 重要 性 ,而且 可 作为 一 个 说 明 选 择 定理 的 应 用 的 例子 . 以 后 没有 明 
显 地 用 到 本 节 的 内 容 - 
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特别 地 ,如果 mo 集中 于 点 zo 上, 那么 4n(T) =K 中 (zo,T) 与 从 zo 到 工 的 转移 概 
率 一 致 
定义 1 如 果 对 于 每 个 开 区 间 了 C1,a{fIT} > 0, 那么 称 测度 a 在 有 中 是 严格 正 
的 . 如 果 对 于 1 中 的 每 个 z 和 每 个 开 区 间 I,K(z,T) > 0, 那么 称 核 KK 是 严格 正 的 . 
定义 2 ” 如果 存在 一 个 严格 正 的 概率 分 布 a, 使 得 yr, 一 a， 且 这 种 收 化 与 初始 分 
市 mo 无 关 ， 那么 核 是 遍历 的 . 

对 于 a 的 每 个 连续 区 间 , 这 等 价 于 


KW™(z,1) 一 a(D > 0. (7.2) 


这 个 定义 同 离散 情形 (第 1 卷 第 15 章 ), 它 的 意义 已 在 6.11 节 的 例子 中 得 到 讨论 和 
阑 明 . 

最 一 般 的 随机 核 可 以 有 种 种 变态 ， 我 们 拟 把 理论 局 限于 以 连续 方式 依赖 于 2 
的 核 , 表达 这 个 理论 的 最 简单 的 方法 是 考虑 由 K 导出 的 连续 函数 类 上 的 变换 . 给 
定 一 个 在 基本 区 间 2 上 有 界 且 连 续 的 函数 u, 我们 定义 uo = u， 由 归纳 法 ， 


wo) = | Klean y), (73) 


这 个 函数 变换 是 测度 变换 (7.1) 的 对 偶 变换 . 注意 , 在 本 节 中 , 在 这 两 种 情况 下 , 指 
标 用 来 表示 K 导出 的 变换 的 结果 . 

我 们 想 要 强加 于 天 上 的 正则 性 质 , 粗略 地 说 ， 是 使 ui 不 应 比 uo 坏 . 下 列 定 
义 恰好 表达 了 我 们 的 需要 , 但 好 像 只 是 形式 上 的 . 例子 将 说 明 它 在 典型 的 情况 下 显 
然 是 满足 的 . 
定义 3 如 果 当 uo 在 2 上 一 致 连续 的 时 候 ， 变 换 uk 的 族 是 等 度 连续 @ 的 ， 那 么 
核 开 是 正则 的 . 
例 (a) 卷 积 . 如 果 下 是 一 概率 分 布 , 那么 卷 积 


mo)= [mile P(ey) 


表示 变换 (7.3) 的 一 个 特殊 情形 .( 在 这 种 情形 下 , 利用 不 言 而 喻 的 记号 , 有 K(z, 7) = 
FI{I 一 z}.) ”这 个 变换 是 正则 的 ， 因 为 当 wo 一 致 连续 时 ， 存 在 这 样 的 5， 
使 得 |z' 一 z| < 6 草 含 luo(z') 一 uo(z”)| < e. 根据 归纳 法 ， 这 保证 对 于 所 有 的 
mlun(z) — un(2)| < e. 


@ 见 本 节 的 第 2 个 脚注 .我们 的 “正则 性 * 与 希 尔 伯 特 (Hilbert) 空间 理论 中 所 用 的 “完全 连续 性 ” 
相 类 似 . 
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例 (b) 令 8 是 单位 区 间 , 令 K 是 由 密度 上 确定 的 , & 在 闭 的 单位 正方 形 中 是 连 
续 的 , 那么 KK 是 正规 的 - 实际 上 


1 
lane) = unle < {Mele = nle", Dl ent ay. (74) 


由 归纳 法 可 见 ， 如 果 luol < M, 那么 对 所 有 的 n 也 有 lun| < M. 由 于 大 的 一 致 连 
续 性 , 存在 这 样 的 6, 使 得 


当 | 一 2 < 6 时 ， |k(z',y) — k(z",W)| < e/M 


于 是 对 任意 mun(z') 一 un(2")| < <. 

下 列 定理 中 的 严格 正 这 一 条 件 是 不 必要 的 . 它 的 主要 作用 是 排除 我 们 在 第 1 
第 15 章 中 讨论 过 的 可 分 解 周期 链 这 个 麻烦 . 
定理 1 有 界 闭 区 间 1 上 的 每 个 严格 正 的 正则 核 KK 是 遍历 的 . 

这 个 定理 在 8 是 无 界 的 时 候 就 不 成 立 了 ， 因 为 (7.2) 中 的 极限 可 能 恒 等 于 0. 
通用 的 准则 可 以 用 平稳 测度 来 叙述 ， 我 们 知道 ， 称 测度 a 关于 K 为 平稳 的 ， 如果 
aa = aa =… = a, 即 如 果 它 的 变换 (7.1) 是 恒 等 的 . 
定理 2 为 使 严格 正 的 正则 核 K 是 遍历 的 ， 当 且 仅 当 它 具 有 严格 正 的 平稳 概率 分 
布 a. 
定理 1 的 证 明令 vo 是 连续 函数 , v1 是 它 的 变换 (7.3). 证 明 依赖 于 一 个 显然 的 
事实 ; 对 于 严格 正 的 核 K, 除 vo 为 常数 的 情形 外 , 变换 vi 的 极 大 值 严格 地 小 于 vo 
的 极 大 值 . 

现在 考虑 连续 函数 uo 的 变换 un 的 序列 . 因为 9 是 闭 的 , 所 以 wo 在 9 上 是 一 
致 连续 的 ， 因 此 序列 {un} 是 等 度 连续 的 .从 而 根据 8.6 节 定 理 3， 存 在 一 个 子 序列 
{fun} 一致 地 收敛 于 一 连续 函数 vo. 于 是 wn。+1 收敛 于 vo 的 变换 1. 现在 un 的 极 
大 值 mn 的 数列 是 单调 的 , 因此 mn 收敛 于 一 极限 m. 由 一 致 收敛 性 , vo 和 vi 两 
者 有 极 大 值 m, 因而 对 于 所 有 的 z,vo(z) = m. 这 个 极限 是 与 子 序列 {wn,} 无 关 的 ， 
因此 一 致 地 有 wn 一 m. 

令 mo 是 8 上 的 任 一 概率 分 布 ,并 用 En 表示 关于 它 的 在 (7.1) 中 定义 的 变换 
mn 的 期 望 . 比较 (7.1) 和 (7.3), 可 得 


En(uo) = Eo(un) 一 Eo(m) = m. 


En(uo) 对 任意 连续 的 uo 的 收敛 蕴含 存在 一 个 概率 测度 a, 使 得 yn 一 a.( 见 8.1 节 
定理 2: 收敛 是 正常 的 , 因为 分 布 ?yn 集中 于 有 穷 区 间 上 .) 由 (7.1) 推出 , a 关于 KK 
是 平稳 的 .a 的 严格 正 性 是 K 之 严格 正 性 的 直接 推论 . p 
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定理 2 的 证 明 ”用 卫 表 示 关 于 给 定 平稳 分 布 的 期 望 . 对 于 任意 的 wo e C[-00, oo] 
及 其 变换 wu ， 我们 由 平稳 性 有 E(wo) = E(w) = … 此 外 , E(luxl) 随 大 而 减少 , 因 
此 imE(lwk|) = m 存在 

和 在 上 述 证 明 中 一 样 , 我 们 选择 一 个 使 wn。 一 vo 的 子 序列 . 于 是 un 一刻 ， 
其 中 心 是 vo 的 变换 .根据 有 界 收敛 性 ， 这 就 得 出 E(un,) 一 E(wo) 和 E(hin.|) 一 
E(lvol), 于 是 


E(w) = 了 (wo) = E(wo), E(lvil) = 了 (wol) = m. 


考虑 到 K 的 严格 正 性 , 最 后 一 个 等 式 蕴 含 连续 函数 vo 不 能 变 号 . 因此 , 当 E(wo) =0 

时 , 恒 有 wo(z) = 0. 由 此 , 对 于 任意 的 初 值 wo, 对 于 所 有 的 z, 我 们 有 vo(z) = E(wo). 

这 就 证 明了 wn(z) 一 (wo), 此 等 价 于 在 所 有 连续 区 间 上 , K"(z,T) 一 a(T). Pp 
我 们 现在 把 这 个 理论 应 用 于 周 长 为 1 的 贺 上 的 卷 积 , 即 应 用 于 具有 形式 


1 
on 四 = 人 wte -yr{ay) (75) 


的 变换 ,其 中 下 是 贺 上 的 概率 分 布 , 加 法 被 模 1 所 约 化 [ 见 2.8 节 及 8.6 节 例 (a)]. 
这 个 变换 可 以 写成 2 = 1 及 Km"(z,T) = Fm*{z 一 了} 的 (7.3) 的 形式 , 如 果 三 
是 严格 正 的 , 那么 定理 1 可 以 直接 应 用 , 但 是 我 们 要 证 明 下 列 与 中 心 极 限定 理 类 似 
的 更 一 般 的 定理 . 
定理 3@ 设 矿 是 加 上 的 概率 分 布 , 假设 它 不 集中 于 一 个 正 多 边 形 的 顶点 上 ,那么 
Fm 趋 于 具有 常数 密度 的 分 布 . 
证 只 需 证 明 , 对 于 任 一 连续 函数 uo, 变换 un 趋 于 常数 m( 依 赖 于 uo) 就 够 了 . 实 
际 上 , 正如 定理 1 的 证 明 的 第 2 部 分 所 证 明 的 那样 , 这 蕴含 F"* 收敛 于 贺 上 的 概 
率 分 布 ai 因为 a 妇 uo 对 于 每 个 连续 函数 uo 是 常数 , 所 以 推出 a 和 均匀 分 布 一 致 . 
为 了 证 明 un 一 m, 我 们 可 以 利用 定理 1 的 证 明 的 第 一 部 分 , 不 过 我 们 需要 重 
新 证 明 下 列 命题 : 除了 vo 为 常数 的 情形 外 , 连续 函数 vo 的 变换 v1 的 极 大 值 严格 小 
于 w 的 极 大 值 . 因此 , 为 了 证 明定 理 , 只 要 建立 下 列 命 题 就 够 了 : 如 果 vo 是 这 样 的 
连续 函数 ， 使 得 vo < m 且 对 于 一 个 长 度 为 入 >0 的 区 间 了 的 所 有 点 2,vo(T) < m， 
那么 存在 这 样 的 r,， 使 得 对 所 有 的 zur(z) < m. 
因为 旋转 不 影响 极 大 值 ,所 以 不 失 一 般 性 , 可 以 假设 0 是 下 的 增 点 . 如 果 ) 是 
另 一 增 点 ,那么 0,5,2b,…,rb 是 Frw 的 增 点 ,并且 可 以 选择 这 样 的 和 r， 使 得 


@ 对 于 开 直线 上 的 类 似 定 理 , 见习 题 23 和 习题 24. 对 于 向 可 变 分 布 的 推广 , 见 P. Lévy, Bull. Soc. 
Math. France, vol. 67(1939) pp. 1-41; A. Dvoretzky and J. Wolfowitz, Duke Math. J., vol. 
18(1951) pp. 501-507. 
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每 个 长 度 为 的 区 间 至 少 包含 这 些 点 中 的 一 点 ( 见 5.4a 节 的 引 理 1 和 系 ). 根据 定 


1 
vo) = [wte Wetay). (7.6) 
对 于 每 一 点 z， 可 以 找到 F"* 的 一 个 增 点 y， 使 得 z 一 y 包含 在 了 中， 于 是 
vo(Z 一 臣 < m. 因此 wr(z) < m. 因为 z 是 任意 的 , 所 以 断言 得 证 . > 


注 ”这 个 证 明 稍 加 修改 后 可 以 用 来 证 明 : 如 果 已 集中 于 具有 一 个 项 点 在 0 处 的 正 
多 边 形 的 顶点 上 , 那么 F"** 趋 于 具有 相等 质量 原子 的 原子 型 分 布 .如 果 0 不 在 原子 
中 , 那么 FP"* 未 必 收敛. y 
例 (c)” 设 下 集中 于 两 个 无 理 点 a 和 a+ 5 上, 那么 Fnmx 集中 于 两 点 na 和 nat3 
上 , 且 不 可 能 收敛 . > 
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正则 变化 的 概念 (J. 卡拉 马 塔 于 1930 年 引入 的 ) 已 被 证 明 在 许多 方面 富有 成 
效 ,并 且 在 概率 论 中 的 应 用 越 来 越 广泛 . 其 原因 将 在 下 列 引 理 中 得 到 部 分 的 说 明 ， 
此 引 理 尽管 很 简单 但 却 是 很 基本 的 . 本 节 的 例子 包含 了 一 些 有 趣 的 概率 结果 ,习题 
29 和 习题 30 包含 一 些 关于 稳定 分 布 的 基本 结果 , 这 些 基本 结果 可 以 由 引 理 1 以 初 
等 的 方法 推出 来 .( 亦 见习 题 31.) 

我 们 常常 需要 讨论 在 0Dz 或 瑟 55 上 积分 JPfdz} 得 出 的 单调 函数 U, 这 里 下 
是 一 分 布 函数 [例如 , 见 (4.5) 和 (4.15)、(4.16)] . 利用 普通 的 参数 变换 可 以 由 这 样 的 
函数 U 导出 一 族 形 如 atV(tz) 的 函数 , 我 们 需要 研究 当 t 一 co 时 它们 的 渐 近 性 质 , 
如 果 存 在 一 极限 %(z)， 那 么 在 条 件 (1) > 0 下 只 需 考虑 具有 形式 at = yw(1)/U(t) 
的 正规 化 因子 就 够 了 . 因此 ,下列 引 理 的 范围 比 乍 看 起 来 要 广 , 它 表明 可 能 的 极限 
所 成 类 是 非常 小 的 . 

引 理 1 设 U 是 加 00 上 的 正 单调 函数 , 使 得 在 稠密 点 集 A 上 . 


人 一 Wz) < 00, 一 co， (8.1) 


那么 
W(z) = 1, (8.2) 
其 中 -oo 和 和 oo. 
毫 无 意义 的 符号 z” 只 是 为 了 避免 例外 而 引入 的 . 当然 , 当 x > 1 时 视 其 为 co， 
当 z < 1 时 视 其 为 0. 类 似 地 , z-” 为 oo 或 0 视 z<1 或 z>1l 而 定 ( 见 习题 25). 
证 明 ”恒等式 
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Ultziz2) _ Ul(tz1z2) Idtzo) 
Ut) Ul(tz2) U(t) 


表明 , 如 果 在 (8.1) 中 对 zx = zl 和 z = z2 存在 有 穷 正极 限 ， 则 对 z = zlz2 亦 然 ， 
且 


(8.3) 


(ziza) = yz1) p72). (8.4) 


首先 假设 对 某 点 zt 有 (z1) = co, 那么 由 归纳 法 对 于 所 有 n, (2?) = 00,(z1”) = 
0. 由 于 少 是 单调 的 , 所 以 或 者 V(z) = zc, 或 者 V(z) = z-~, 剩 下 的 是 只 需 对 取 
有 限 值 的 少 证明 引 理 (见习 题 25). 由 假设 的 单调 性 , 我 们 可 利用 右 连 续 性 把 的 
定义 域 扩大 为 全 直线 . 在 这 种 情形 下 ，(8.4) 在 所 有 的 点 zl za 上 成 立 . 于 是 , (8.4) 
与 我 们 反复 用 来 描述 指数 分 布 特征 的 方程 只 在 记号 上 有 差别 . 事实 上 , 令 z=e 和 
(ef) = wu(€), 关系 式 (8.4) 就 变 成 u(&1 + 如) = wu(&1)u(&2). 由 第 1 卷 17.6 节 知道 ， 
所 有 在 有 限 区 间 上 有 界 的 解 具 有 形式 u(é) = ex. 但 是 这 和 %(z) = z? 是 一 样 的 . > 

称 满足 具有 有 限 p 的 引 理 1 的 条 件 的 函数 U 是 在 无 穷 远 处 正则 变化 的 ,这 个 
定义 将 被 扩展 到 非 单调 函数 上 . 如 果 我 们 令 


U(z) = zzZ(z)， (8.5) 
那么 (tr)/U(z) 逼近 z?, 当 且 仅 当 对 于 每 个 z > 0， 


L(tz) 
L(t) 


具有 这 个 性 质 的 函数 称 为 是 缓慢 变化 的 , 于 是 变换 (8.5) 把 正则 变化 变 成 缓慢 变化 . 
利用 这 个 事实 来 给 出 正则 变化 的 正式 定义 将 是 方便 的 . 
定义 ”定义 在 ,06 上 的 正 (未 必 单 调 ) 的 函数 卫 在 无 穷 远 点 是 缓慢 变化 的 ， 当 且 仅 
当 (8.6) 成 立 . 

画 数 U 以 指数 p( 一 oo < p < co) 缓慢 变化 ， 当 且 仅 当 它 具有 (8.5) 的 形式 ,其 
中 荆 是 缓慢 变化 的 . 

这 个 定义 可 推广 到 原点 上 的 正则 变化 : 为 使 U 在 0 点 正则 变化 ， 当 且 仅 当 
UV(z-0 在 oo 处 正则 变化 . 因此 , 对 于 这 个 概念 不 需要 新 的 理论 . 

正则 变化 的 性 质 只 依赖 于 在 无 穷 远 处 的 性 态 ， 因 此 不 必要 求 L(z) 对 所 有 的 
Zz > 0 都 是 正 的 ,甚至 不 必要 求 L(z) 对 于 所 有 z > 0 都 有 定义 . 
例 (a) ”linz| 的 所 有 次 备 在 0 点 和 在 oo 处 都 是 缓慢 变化 的 . 类 似 地 ， 趋 于 正极 限 
的 函数 是 缓慢 变化 的 . 

函数 (1 + z2)p 在 co 点 以 指数 2p 正则 变化 . 


一 1，t 一 oo. (8.6) 
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ez 在 无 穷 远 处 不 是 正则 变化 的 ,但 它 满足 具有 p = oo 的 引 理 1 的 条 件 . 最 
后 , 2 + sinz 不 满足 (8.1). > 

为 了 易于 引用 , 我 们 把 引 理 1 改写 成 下 列 形式 . 
定理 为 使 单调 澶 数 U 在 无 穷 远 处 正则 变化 ， 当 且 仅 当 (8.1) 在 稠密 集合 上 成 立 ， 
且 极限 翅 在 某 个 区 间 上 是 有 穷 的 且 为 正 的 . @ 

当 假定 在 所 有 点 上 都 收敛 时 ,这 个 定理 可 以 搬 到 非 单调 函数 上 去 . 

下 列 引 理 可 用 来 加 深 我 们 对 正则 变化 的 理解 . 它 是 缓慢 变化 函数 一 般 形式 (9.9) 
的 直接 推论 . 
引 理 2 ”如 果 工 在 无 穷 远 处 是 缓慢 变化 的 ,那么 对 于 任 一 国定 的 > 0 和 所 有 充 
分 大 的 z， 

2 < 了 工 z) < 于. (8.7) 


在 (8.6) 中 所 取 的 极限 在 有 穷 区 间 0 <a<z<b 中 是 一 致 的 . 
我 们 以 一 个 常用 的 准则 来 结束 这 个 研究 . 
引 理 3 假设 


和 n+1 
EL 1 
hn 


如 果 U 是 单调 函数 ， 使 得 在 一 个 稠密 集合 上 ， 
limMnU(anz) = X(z) < oo (8.8) 


存在 ,并 且 X 在 某 个 区 间 上 是 有 限 且 为 正 的 , 则 U 是 正则 变化 的 , 并 且 X(z) = cz2， 
其 中 -oo <p < oo. 
证 ”我们 可 以 假设 x(1) = 1, 且 (8.8) 对 z= 1 成 立 (因为 这 可 由 尺度 的 明显 变化 
而 得 到 ). 对 于 给 定 的 t, 把 n 定义 为 使 an+l > 的 最 小 整数 . 于 是 an < t < an+l， 
并 且 对 于 非 减 的 U， 


Unz)  Udtz)  U(ant17). 
Ulant1) 1 ~ Ul(an) 
对 于 非 增 的 U, 相反 的 不 等 式 成 立 . 因为 mnU(an) 一 二 所 以 两 端的 项 在 使 (8.8) 成 
立 的 每 一 点 上 都 趋 于 x(z). 因此 , 断言 已 包含 在 上 一 定理 之 中 . p 
为 了 举例 说 明 典 型 的 应 用 , 我 们 首先 推导 一 个 应 属于 R. A. 费 希 尔 和 格 涅 坚 科 

(B. V. Gnedenko) 的 极限 定理 , 然后 推导 一 个 新 结果 . 


(8.9) 


@ 正则 变化 的 概念 可 推广 如 下 ， 代 蔡 (8.1) 中 极限 存在 这 个 条 件 ， 我 们 只 要 求 每 个 趋 于 无 穷 的 序列 
{tn} 包含 一 个 子 序列 , 使 得 U(tnxz)/U(tnx) 趋 于 有 穷 正 极限 . 那么 , U 是 控制 变化 的 ( 见 8.10 
节 习题 末尾 ). 
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例 (b) 极 大 值 的 分 布 . 设 变量 Xx 是 相互 独立 的 且 有 共同 分 布 F. 设 
X% = max[X1,.…, Xn]. 


我 们 问 , 是 否 存在 一 个 尺度 因子 on 使 得 变量 X*/an 有 极限 分 布 G? 我 们 排除 两 种 
情形 ,因为 它们 是 平凡 的 . 如 果 玉 有 一 个 最 大 增 点 ,那么 Xx 的 分 布 显然 趋 于 集 
中 在 5 上 的 分 布 . 另 一 方面 , 总 可 以 选择 这 样 迅速 增加 的 尺度 因子 cn, 使 得 ne 
依 概率 趋 于 0, 其 余 的 情况 为 下 述 命题 所 包含 . 

设 对 所 有 的 z, 下 (T) < 1. 为 使 对 于 适当 的 尺度 因子 an, XX*/an 的 分 布 Gn Pe 
不 集中 在 0 上 的 分 布 G， 当 且 仅 当 1 一 下 以 指数 p < 0 正则 变化 . 在 这 种 情形 下 ， 
对 于 z> 0， 

G(z) = erczp; (8.10) 

对 于 z < 0,G(z) = 0( 显 然 c > 0). 
证 ”如 果 极 限 分 布 G 存在 , 那么 在 所 有 连续 点 上 有 


Fm(anz) = G(z). (8.11) 
取 对 数 并 注意 当 z 一 0 时 , In (1 一 z) ~ 一 z, 我 们 有 
nll— F(anz)] = — In G(r). (8.12) 


因为 在 某 一 区 间 上 0 < G(z) < 1, 所 以 上 一 引 理 保证 了 1 一 下 的 正则 变化 性 . 反之 ， 
如 果 1 一 下 是 正则 变化 的 , 那么 可 以 确定 这 样 的 an, 使 得 nl 一 F(an)] 一 1. 
种 情形 下 , (8.12) 中 的 左边 趋 于 z?( 见 习题 26). 

例 (c) ” 卷 积 . 由 定义 (8.6) 显然 看 出 ， 两 个 缓慢 变化 函数 之 和 还 是 缓慢 变化 的 . 我 
们 现在 来 证 明 : p> 
命题 “如果 及 和 F 是 两 个 这 样 的 分 布 画 数 , 使 得 当 工 一 00 时 


1— Fi(z) = £ ?Li(z), (8.13) 
其 中 Li 是 缓慢 变化 的 ， 那 么 卷 积 G = 五 直到 有 这 样 的 正则 变化 的 尾部 ， 使 得 
1- G(z) ~z-e(Di(z) + La(z)). (8.14) 


证 令 X 和 X2 是 具有 分 布 玉 和 了 瑟 的 独立 随机 变量 . 设立 = (1+6)t>t. 事件 
Xi 十 X2 > 上 在 一 个 变量 > # 而 另 一 个 变量 > 一 t 时 发 生 . 当 t 一 00 时 , 后 一 事 
件 之 概率 趋 于 1. 因此 , 对 于 任 一 s > 0 和 充分 大 的 已 


1—G(t) z[(1— F(t))+(1— F(t)))(1 —e). (8.15) 
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另 一 方面 , 如 果 我 们 设 妇 = (1 一 6)t, 其 中 0 < 5 < 于 那么 只 有 当 两 个 变量 之 
一 大 于 t 或 者 两 个 变量 都 大 于 比 时 ,事件 Xi + Xs > t 才 可 能 发 生 . 由 (8.13) 看 
来 , 很 明显 ,后 一 事件 的 概率 与 事件 Xi > t 的 概率 相 比 是 渐 近 可 忽略 的 ， 这 理 信 
对 于 充分 大 的 


1— G(t) < [(1— Fi(#")) + (1— F2(t"))](1 + e). (8.16) 
因为 5 和 e 是 任意 小 的 ， 所 以 把 两 个 不 等 式 (8.15) 和 (8.16) 合 起 来 就 可 得 到 断言 
(8.14). > 


对 7 用 归纳 法 , 我们 得 到 有 趣 的 : 
系 如 果 1 一 F(z) ~z-?L(z), 那么 1 一 Frw(z) ~ rz-?L(z). 

这 个 定理 9 在 能 应 用 的 时 候 通 过 提供 关于 尾部 的 信息 来 补充 中 心 极限 定理 .( 对 
于 在 稳定 分 布 中 的 应 用 ， 见 习题 29 和 习题 30. 对 于 涉及 到 复合 泊 松 分 布 的 一 个 有 
关 定 理 , 见习 题 31.) 
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本 节 的 目的 是 研究 尾部 与 具有 正则 变化 尾部 的 分 布 之 截 尾 矩 之 间 的 关系 . 主要 
的 结果 是 , 如 果 1- F(z) 与 F(z) 是 正则 变化 的 , 那么 所 有 的 截 尾 矩 也 是 正则 变化 
的 . 这 个 结果 包含 在 定理 2 中 , 定理 2 包含 的 内 容 比 讨论 稳定 分 布 时 需要 的 内 容 要 
多 . 可 以 直接 证 明 它 , 但 也 可 以 把 它 看 作 是 定理 1 的 系 , 定理 1 包含 了 卡拉 马 塔 @ 
给 出 的 正则 变化 的 明显 特征 . 因此 , 似乎 最 好 要 特别 地 给 出 理论 的 完全 解释 ， 因 为 
论证 可 以 大 大 简化 9 

我 们 引入 形式 上 的 缩写 式 


有 = vay B00)= zWar. (9.1) 


现在 来 证 明 ， 当 2 为 正则 变化 时 ,这 些 函 数 是 渐 近 地 与 Z 相关 的 , 正如 在 简单 情 
形 Z(z) = ze 中 一 样 . 


@ 波 尔 特 (S. C. Port) 曾 讨论 过 一 些 特殊 情形 . 

* 本 节 只 用 于 稳定 分 布 理 论 中 , 但 是 在 参考 文献 中 , 定理 2 的 利用 可 以 简化 许多 宛 长 的 计算 . 

@ J. Karamata, Sur un mode de croissance reguliere, Mathematica(Cluj), vol. 4(1930) pp. 
38-53. 尽管 经 常 参考 这 篇 论文 , 但 是 看 来 没有 更 新 的 解释 存在 . 关于 最 近 的 推广 以 及 在 移 伯 定理 中 
的 应 用 , 见 W. Feller, One-sided analogues of Karamata’s regular variation, in the Karamata 
memorical volume (1968)of LEnseignement Mathématique. 

@ 尽管 这 里 给 出 的 定理 1 的 证 明 是 新 的 , 但 我 们 利用 了 卡拉 马 堪 的 想法 . 
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2p 在 无 穷 远 点 的 渐 近 性 质 不 受 2 在 原点 旁 的 性 质 的 影响 . 因此 , 不 失 一 般 性 ， 
我 们 可 以 假设 2 在 0 的 某 个 邻 域内 恒 等 于 0, 因此 确定 Zr 的 积分 对 所 有 的 PP 都 
有 意义 . 
引 理 邻 2 > 0 是 缓慢 变化 的 . 对 于 p< 一 1, (9.1) 中 的 积分 在 oo 处 收 钱 ;对 于 
了 > 一 1, 它 在 oo 处 发 散 . 

如 果 p 之 一 1， 那么 Zp 以 指数 了 十 1 正则 变化 . 如 果 p < 一 1， 那么 2 以 指数 
Pp 十 1 正则 变化 , 并 且 如 果 Z*1 存在 ,那么 这 对 于 p 十 1 二 0 仍然 是 正确 的 . 
证 ”对 于 给 定 的 z > 0 和 < > 0, 选取 这 样 的 nm, 使 得 对 于 y > ， 


(1 0)20) < Z(ey) < + 0)20). (92) 
假设 (9.1) 中 的 积分 收敛 . 由 
ZX(tz) = zptl Zzy)dy (9.3) 


推出 , 对 于 t>”， 
(1 一 ezp+127() < Z(tz) < (1 二 e)zp+122 人. 
因为 = 是 任意 的 ,所 以 我 们 知道 ， 当 上 一 00 时 
2Z*(tz) 
1 
Zz Pt (9.4) 
这 就 证 明了 2 是 正则 变化 的 . 此 外 ,因为 如 是 减 函 数 ， 所 以 p 十 1 < 0. 因 


此 , 只 有 当 p < -1 时 , (9.1) 中 的 积分 才 可 能 收敛 . 

其 次 , 假设 这 些 积分 发 散 . 于 是 对 于 t > 7， 

t 
有 9 = alr) + ont (oy. 
因此 
(1 — e)z?+12,(t) < Zp(tz) — Zp(nz) < (1 + e)z?+12,(t). 

除 以 Z(t) 并 令 t 一 o0, 如 同上 述 , 我 们 可 得 Zp(tz)/2p(t) 趋 于 zp+1. 因此 , 在 发 
散 的 情况 下 ， 2; 是 正则 变化 的 , 发 散 只 有 在 p > 一 1 时 才 可 能 发 生 . > 

下 一 定理 证 明了 : 2 之 正则 变化 性 保证 Z 和 的 正则 变化 性 ; 除了 2 或 
2 是 缓慢 变化 的 情形 外 , 其 道 也 是 正确 的 . 此 外 , 我 们 得 到 了 关于 判别 这 些 函 数 正 
则 变化 性 的 一 个 有 用 的 准则 . 定理 的 (a) 部 分 和 (b) 部 分 分 别 讨论 函数 如 和 Zr. 
它们 在 各 方面 都 是 平行 的 , 但 是 只 有 (a) 部 分 广泛 地 应 用 于 概率 论 中 . 
定理 1 (a) 如 果 2 以 指数 7 正则 变化 ,2Zz 存在 ,那么 


tt12(t) ， 
0 [0) 和 (9.5) 
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其 中 入 = 一 (p+7+1) 之 0. 
反之 , 如果 (9.5) 对 于 入 >0 成立, 那么 Z 和 如 分别 以 指数 = 一 和 一 p 一 1 
和 一 和 正则 变化 . 如 果 (9.5) 对 于 入 = 0 成立, 那么 如 是 缓慢 变化 的 (但 是 对 于 2 
得 不 到 任何 结论 ). 
(b) 如 果 2 以 指数 7 正则 变化 , 且 p> 一 7 一 1, 那么 
tt12(t) 
Zp(t) 


3 (9.6) 


其 中 和 =p 二 7 十 1 

反之 , 如 果 (9.6) 对 于 入 > 0 成 立 , 那么 Z 和 25 分别 以 指数 入 -p 一 1 和 入 正 
则 变化 . 如 果 (9.6) 对 于 入 = 0 成 立 , 那么 Zp 是 姓 慢 变化 的 . 
证 两 部 分 的 证 明 是 相同 的 , 我 们 只 对 (a) 部 分 进行 . 设 


PZY) _ ny) 
ZB) yy @7) 
左边 的 分 子 是 分 母 的 负 导 数 , 因此 对 于 z > 1 有 
Z(t) dy_ nts) ds 
n tt) = 广 MW) = "0 国王 : (9.8) 


现在 假设 2 是 以 指数 正则 变化 的 . 根据 上 一 引 理 ，2; 以 指数 和 =Y+p+1 
正则 变化 , 因此 (9.7) 的 两 边 以 指数 -1 正则 变化 . 于 是 7 是 缓慢 变化 函数 . 因此 ， 
当 t 一 00 时 , (9.8) 中 的 最 后 一 个 被 积 函数 趋 于 s-! . 遗憾 的 是 ， 我 们 不 知道 7 是 
有 界 的 ， 因 此 我 们 只 能 由 法 图 定理 [ 见 4.2 节 (2.9)] 来 断言 积分 的 下 极限 > In z 
但 由 于 四 的 正则 变化 性 , 我 们 知道 左边 趋 于 Aln z, 因此 


lim sup n(t) < 入 . 


但 是 这 蕴含 7 的 有 界 性 ， 因 而 我 们 可 以 选择 这 样 一 个 序列 如 一 co, 使 得 nn(tn) 一 
< < co. 由 缓慢 变化 性 , 这 蕴含 对 于 所 有 的 s,m(tns) 一 c, 收敛 是 有 界 的 . 于 是 (9.8) 
的 右边 趋 近 于 c ln r， 因 此 c = 入 由 此 推出 , 极限 c 是 与 序列 {tn} 无 关 的 ， 从 而 
7() 一 入 这 就 证 明了 (9.5) 是 正确 的 . 

其 逆 是 比较 容易 证 明 的 . 设 n(t) 一 和 > 0, 于 是 (9.8) 的 两 边 都 趋 近 于 和 ln zx， 
因此 如 所 断言 ， 比 2 (b)/2;(tz) 趋 近 于 zx 如 果 入 > 0, 那么 这 和 (9.5) 合 在 一 起 就 
证 明了 2 以 指数 -和 一 p 一 1 正则 变化 . > 

虽然 我 们 以 后 没有 用 到 它 , 但 是 我 们 还 是 要 令 述 下 列 有 趣 的 ， 
系 “为 使 函数 Z 是 缓慢 变化 的 ， 当 且 仅 当 它 具 有 形式 


Ze) = alz) emp ( [ Way) i (99) 
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其 中 当 工 一 oo 时 , e(z) 一 0, alz) 一 c< oo . 
证 “容易 验证 ， 右 边 是 一 个 缓慢 变化 函数 反之， 假设 2 是 缓慢 变化 的 . 利用 
(9.6)(p = 7 = 0), 我 们 得 到 

Zt) _ 1+e(t) 

C7 


其 中 el(t) 一 0. 在 左边 , 分 子 是 分 母 的 导数 , 经 过 积分 , 我 们 得 到 
Zolz) = Zo(D) -2 exp ( 广 蜡 4)， 


基 注 


这 等 价 于 (9.9), 因为 根据 (9.6) 有 2(z) ~ Zo(z)z-:!. p> 
我 们 着 手 把 定 理 1 应 用 于 概率 分 布 F 的 截 尾 矩 函数 . 我 们 可 以 单独 地 考虑 每 
个 尾部 , 也 可 以 把 它们 结合 起 来 , 考虑 F(z) F(z) 而 不 考虑 严 因此 ,只 需 研究 
集中 于 只 避 上 的 分 布 忆 就 够 了 . 对 于 这 样 的 分 布 , 我 们 把 截 尾 矩 函数 U6 和 Un 定 
义 为 ， 
v= rw, wo= /vray. (910) 
0 E43 


不 用 说 , 第 2 个 积分 收敛 , 而 第 1 个 积分 当 z 一 co 时 趋 于 co. 这 要 求 5 > 0, -oo < 
7 < 5. 特别 , Ww = 1 一 下 是 分 布下 的 尾部 . 
我 们 证 明定 理 1 的 (a) 部 分 的 一 个 推广 ; (b) 部 分 可 用 同样 的 方式 推广 . 
定理 29 假设 Uc(00) = oo. 
(i) 如 果 Ue 和 成 中 有 一 个 是 正则 变化 的 ， 那 么 存在 极限 
tn"Vn(t) 


i = gcgoo. i 
Jim。 ett) c¢ Ogcgoo. (9.11) 


我 们 把 这 个 极限 唯一 地 写成 如 下 形式 : 


cae 


<a< 
i 9<a<4， (9.12) 


其 中 如 果 c 二 00, 那么 a = 也- 
(让 反之, 如 果 (9.11) 对 于 0<c< oo 是 正确 的 , 那么 一 定 有 a 之 0, 并且 存在 
一 个 缓慢 变化 函数 三, 使 得 
Uc(z) ~ (a—nN)z Lr) Volz) 一 (一 az?-“Z(z). (9.13) 


其 中 符号 ~ 表示 两 边 之 比 越 于 1. 
@ 关于 推广 , 见习 题 34 和 习题 35- 
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( 阁 ) 只 要 以 显然 的 方式 解释 符号 ~， 这 个 陈述 在 c= 二 0 或 c= co 时 仍 是 正确 的 . 
例如 , 如果 (9.11) 对 于 c = 0 成 立 , 那么 a = 5, 是 缓慢 变化 的 , 但 是 关于 
巧 我 们 只 知道 Vi(z) = o(z?-E(z)). 在 这 种 情形 下 ,V5 未 必 是 正则 变化 的 (见习 
题 31). 但 是 ,缓慢 变化 的 情形 是 函数 Ui 或 W 这 一 的 正则 变化 性 不 列 含 另 一 函数 
正则 变化 性 的 唯一 的 情形 . 
证 (i) 我 们 把 WV 写成 形式 


功 (z) = /人 ctrldy). (9.14) 
在 > 和 + > z 之 间 进行 分 部 积分 ,我们 得 到 
WO -WO = er Ue + eeDe) + (6D f yr. 


右 端 最 后 两 项 是 正 的 ， 因 此 积分 当 t 一 co 时 应 收敛 ， 由 Uc 之 单调 性 ， 这 蕴含 
YUclt) 一 0, 因此 


Wz) = 27-CUc(z) + (C—) J yiUe (ay (0.15) 
或 者 
Cn A oo 
= ne ee 二 [ Uc(y)dy. (9.16) 


现在 假设 Uc 是 正则 变化 的 . 因为 Ue(oo) = co， 所 以 指数 必然 < 6, 我 们 以 《一 a 
来 表示 它 .[ 因 为 (9.16) 中 的 积分 收敛 ， 所 以 我 们 必然 有 a > 9] 具有 2 = Uc 和 
了 =9 一 (一 1 的 关系 式 (9.5) 断言 , (9.16) 之 右 端 当 入 天 0 时 趋 于 


-1+(6-—n)/(a—7)=(6-)/(a—n), 


当 和 = 0 时 趋 于 co. 因此 , 我 们 证 明 , 如 果 Ui 以 指数 《一 a 正则 变化 , 那么 (9.11) 
对 于 (9.12) 给 出 的 且 > 0 的 e 成 立 . 

其 次 , 假设 VW 是 正则 变化 的 . 它 的 指数 < 7, 我 们 以 9 一 a 来 表示 它 . 我 们 利 
用 相同 的 论证 , 除了 把 (9.15) 换 成 类 似 的 关系 式 


Ue(@) = el) + -Dlay (9.17) 


以 外 . 于 是 应 用 具有 2 =W 和 p= 一 7 一 1 的 (9.6) 可 得 (9.11) 对 于 由 (9.12)( 其 
中 >0) 给 出 的 c 成 立 . 
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(地 为 了 证 明 其 逆 , 假设 (9.11) 成 立 ,并 把 c 写成 (9.12) 的 形式 .首先 假定 

0 <c< oo. 我 们 由 (9.16) 看 出 ， 
Zz" Ue(z) 《7 
人 ray 


z 


一 Ga 一人. (9.18) 


由 定理 1(a) 直接 推出 , Us 以 指数 5 - ac > 0 正则 变化 , 于 是 (9.11) 蕴含 W 以 指数 
7 一 a 正则 变化 . 由 此 推出 Vc 和 Vs 可 以 写成 (9.13) 的 形式 , 其 中 >0. 

如 果 c = 0, 那么 用 同样 的 论证 可 以 证 明 U 是 缓慢 变化 的 ,但 是 由 (9.11) 得 
不 出 Ww 是 正则 变化 的 结论 . 

最 后 , 如果 (9.11) 对 于 c= oo 成 立 , 那么 我 们 由 (9.18) 断言 


ze "V(r) 


0, (9.19) 
/ yy)dy 

根据 定理 1(b), 这 蕴含 V 是 缓慢 变化 的 . p 
8.10 习 题 


1. 收 化 的 另 一 定义 . 设 Fn 和 FF 是 概率 分 布 . 证 明 ，Fn 一 FF( 正 常 地 )， 当 且 仅 当 对 于 给 
定 的 e > 0,h > 0 和 也 存在 一 个 N(e,h,t), 使 得 对 于 n> N(e,h,t)， 


F(t—h) -ee< F(t) < F(t+h)+e. (10.1) 
2. 非 正 党 收敛. 如 果 下 是 亏损 分 布 , 那么 (10.1) 荀 含 非 正 常 地 Fn 一 FF. 其 逆 不 成 立 . 证 
明 , 正常 收敛 可 通过 要 求 (10.1) 对 于 n > N(e,h) 成 立 来 定义 . 


3. 设 {Fs} 正常 收敛 于 不 集中 在 一 点 上 的 极限 . 为 使 序列 {Fn(anz + bn)} 收 伍 于 集中 在 
原点 上 的 分 布 ， 当 且 仅 当 an 一 co 加 = o(an). 


4. 设 X1,X2，"… 是 具有 共同 分 布 已 的 独立 随机 变量 ，Sn 二 Xi 十 … 十 Xn， 设 变量 
an15n 一 bn 有 一 个 不 集中 于 一 点 上 的 正常 极限 分 布 [1. 如果 an > 0, 则 


an 一 co， an/an-1—1. 


[提示 ， 利用 8.3 节 定 理 2 来 证 明 aan/an 趋 近 于 有 穷 极 限 ， 只 要 考虑 对 称 分 布 就 够 
了 -极限 分 布 是 稳定 的 , 见 6.1 节 .) 

5. 设 {un} 是 一 个 有 界 单调 函 教 的 序列 ， 它 处 处 收敛 于 一 有 界 连 续 的 极限 (极限 当然 是 
单调 的 ). 证 明 : 收敛 是 一 致 的 .[ 提 示 : 把 坐标 轴 分 成 一 些 子 区 间 , 使 得 * 在 每 个 于 区 间 
上 的 变化 小 于 e.] 


6. 设 玉 集中 于 n-! 上 , w(z) = sin(z”), 则 Fs 妇 u 一 处 处 成 立 , 但 非 一 致 成 立 . 


10. 


11. 


12. 


13. 
分 布 函数 外 (nz) 和 集中 于 mn: 上 的 分 布 F. 
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. (a) 如 果 (Xn,Y%) 的 联合 分 布 收复 于 (X,Y) 的 联合 分 布 ， 那么 Xn 十 Ya 的 分 布 趋 于 


久 十 Y 的 分 布 . 
(b) 证 明 8.3 节 定 理 2 是 一 个 特殊 情形 . 
(e) 如 果 只 知道 Xn 和 Ys 的 边缘 分 布 收敛 , 那么 上 述 结论 一 般 不 成 立 . 


. 设 Fn 一 ,上 且 FF 是 亏损 的 . 如 果 u € Co( 一 coco)， 则 在 每 个 有 穷 区 间 上 一 致 地 有 


肪 友 4 一 下 克 u.( 这 推广 了 8.3 节 定理 1.) 


. 如 果 非 正常 地 有 Fn 一 下, 那么 Fn 妇 Fn 一 下 女 下 不 一 定 成 立 . 


例 令 本 在 点 -nm,0 和 n 上 具有 重量 为 3 的 原子 


在 平面 内 , 每 个 在 无 穷 远 处 等 于 0 的 连续 函数 可 以 用 有 穷 线性 组 合 Deckpk(z)yx(z) 来 
一 臻 逼近 , 其 中 px 及 wi 是 无 穷 可 微 的 


[提示 : 利用 8.3 节 例 (a), 选取 Gk(z,y) = Ms(z)R(y), 其 中 多 是 一 正 态 分 布 ] 


度量 函数 p 称 为 概率 分 布 的 距离 务 数 ， 如 果 p(F,G) 对 于 每 对 概率 分 布 F,G 是 有 
定义 的 ， 且 有 下 列 3 个 性 质 , p(F,G) > 0, 且 p(F,G) = 0 当 且 仅 当下 = G 其 
次 , p(P G) = p(G, F); 最 后 , p 满足 三 角形 不 等 式 


p(F, Fs) < p(Fi, G) + p( 瑟 ,G)， 
P. 列 维度 重 .对 于 两 个 正常 分 布 已 和 G, 把 p(F,G) 定义 为 使 得 对 于 所 有 的 zx， 
F(z—h)—hs< G(r) < F(z+h)+h (10.2) 


在 所 有 的 h > 0 时 的 下 确 界 . 验证 p 是 一 距离 函数 . 证 明 , 为 使 及 一 下 为 正常 的 , 当 
且 仅 当 p(Fn, 下 ) 一 0. 


以 “ 离 差 "表示 的 距离 . 设 p(,G) = supllgu 一 Bull, 其 中 几 e co,llul| = 1 证 明 p 是 
距离 函数 . 9 如 果 已 和 G 是 原子 型 分 布 , 且 对 点 ak 各 自 赋 以 重量 pk 和 gk, 那么 


P(F,G) = 2lpx 一 gx|. (10.3) 
如 果 下 和 G 有 密度 f 和 9, 那么 


Al.)= 人 1) ~ gla). (04) 


[提示 : 只 要 对 连续 的 f 和 9 来 证 明 (10.4) 就 够 了 . 一 般 的 情形 由 逼近 推出 ] 
( 续 ) 证 明 p(Fn,G) 一 0 蕴含 正常 收 全 Fn 一 G. 为 了 说 明 其 道 是 不 正确 的 , 考虑 正 态 


@ 这 个 定义 可 扩展 到 任意 有 穷 测度 之 差 上 ， 并 县 可 以 定义 测度 的 “ 范 数 拓扑 ” .习题 13 说 明 所 产生 
的 收敛 概念 对 于 概率 论 是 不 自然 的 . 
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14. 


15. 


16. 


17. 


18. 


19. 


20. 
21. 


22. 


( 续 ) 如 果 已 = 五 丰 … 坟 FTY = Gi1 克 … 交 Gn, 证 明 


PIU,V) < Dp(Fi, Gi). (10.5) 


气 
这 推广 了 基本 不 等 式 (3.9).[ 拓 示 : 利用 (3.9) 和 一 个 使 得 ||ilw - 名 ull 接近 于 p(U,V) 
的 测试 函数 4] 

用 泊 松 分 布 通 9. 设 对 点 1 赋 以 质量 p, 对 点 0 赋 以 质量 9 = 1 - p. 如 果 G 是 期 
望 为 p 的 泊 松 分 布 ， 证 明 ， p(F, G) < 47, 其 中 p 是 (10.3) 所 定义 的 距离 . 证明, 如 
果 忆 是 nn 个 具有 概率 p1,…,pn 的 伯 努 利 试验 中 成 功 次 数 的 分 布 , 并 且 G 是 具有 其 
望 下 十 … 十 mm 的 泊 松 分 布 ,那么 p(F,G) < (++… 二 成) 

7.7 节 中 的 大 数 定律 说 明 ， 如 果 Xk 是 独立 同 分 布 的 ， 而 且 如 果 E(X) = 0 ,那么 
(Xi 十 … 十 Xn)/n 马 0 试用 8.4 节 定理 1 所 用 的 方法 来 证 明 这 个 结论 . 

如 果 ak = E(|X%15|) 对 于 某 个 5> 0 存在 , 并 且 a +… 十 an = 5(52+5)( 李 亚 普 诺 夫 
(Liapunov) 条 件 )， 那么 它们 就 必然 满足 林 德 伯 格 条 件 (4.15). 

设 Fi 是 对 称 的 ， 并 且 对 z > 11 - F(z) = 32-*-M* ,证 明 它们 不 满足 林 德 伯 格 条 
件 (4.15). 

设 以 概率 (1 一 k-?) 有 Xi = 二 1 以 概率 3k-? 有 Xx = +k,， 利 用 简单 的 截 必 法 来 证 
明 : Sn/V 的 浙 近 性 质 和 以 概率 3 有 Xs = 二 的 情形 一 样 , 因此 ,Sa /VR 的 分 布 超 
于 RN 而 Var(Sn /Vn) 一 2. 

编 出 上 题 的 变形 问题 ,使 E(X?) = co， 上 且 Sn/VF 之 分 布 还 是 趋 于 中. 

中 可 交换 变量 的 中 心 极限 定理 . 对 于 固定 的 9, 令 Fo 是 期 望 为 0, 方差 为 c2(9) 的 分 布 . 
按照 概率 分 布 G 来 选择 9 的 值 ,我 们 考虑 具有 共同 分 布 Ff 的 相互 独立 变量 Xn， 如 
果 oz 是 o2 关于 G 的 期 望 , 证 明 So/(aVi 的 分 布 趋 于 分 布 


/ ™™ (az/o(0))G{d0}. 


只 有 当 G 集中 于 一 点 上 时 , 它 才 是 正 态 分 布 . 

真空 管 中 的 起 伏 噪 声 等. 考虑 具有 离散 化 了 的 时 间 参 数 的 6.3 节 例 (bh) 中 的 随机 过 程 . 
假设 在 时 刻 kh 有 一 电子 到 达 的 概率 为 ah, 证 明 : 在 离散 模型 中 的 电流 强度 由 无 穷 郑 
积 给 出 . 取 极 限 h 一 0 导致 6.3 节 (3.4) 坎贝尔 (Camphell) 定 理 . 


对 占线 的 6.3 节 例 Gi) 作 同样 处 理 . 把 这 个 模型 推广 到 下 列 情形 : 在 时 刻 kh 的 后 效 是 


以 概率 p1,p2,… 取 值 1,2,… 的 随机 变量 . 


@ 这 是 受 L. Le Cam, An approzimation theorem for the Poisson binomial distribution, Pacific 
J. Math, vol. 10(1960) pp. 1181-1197 中 的 不 等 式 的 启发 而 提出 的 . 

@@ 于 有 Blum, H. Chernoff, M. Rosenblatt and H. Teicher, Central limit theorems for inter- 
changeable processes, Canadion J. Math., vol. 10(1958) pp. 222-229. 
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23. 序列 {F"*} 决 不 是 随机 有 界 的 [提示 : 只 需 考虑 对 称 分 布 就 够 了 . 而 且 我 们 可 以 假设 
下 具有 无 穷 尾部 ,否则 根据 中 心 极限 定理 , 有 F"* 一 0. 利用 5.5 节 (5.10)] 
注 在 15.3 节 例 (a) 中 将 证 明 F"* 一 0. 
24.( 续 ) 然而 可 能 有 : 对 每 个 z， 
lim sup F™*(z) = 1, lim inf F"*(z) =0, 
事实 上 , 可 选择 两 个 极 迅速 增加 的 整数 ok 和 nx 的 序列 , 使 得 
(Sm D1. 
[提示 : 考虑 分 布 P{X = (一 1)*ax} = pk. 选取 适当 的 常数 , 下面 的 事件 有 非常 大 的 概 
率 : 在 诸 项 X1,…,， Xn。 中， 有 2k 个 项 等 于 (1)*ax， 且 没有 一 项 的 绝对 值 大 于 ak. 
于 是 对 偶数 ,Sn。> ak 一 mkak-1. 证 明 


ng = (2k)!, m~ Ge 1 ak ~ (ng)* 


就 行 了 ] 
25. 在 8.8 节 引 理 1 之 证 明 中 ， 只 需 假设 集合 4 在 某 个 开 区 间 中 是 秽 密 的 就 够 了 . 
26. 极 大 值 的 分 布 . 设 X1，,…, Xn 是 具有 共同 分 布 F 的 独立 变量 ，XX = max(X1,…， Xn). 
令 Gn 是 an1X 的 分 布 . 
(a) 如 果 F(z) = 1 一 ean =n, 那么 Gn 趋 于 集中 在 点 0 上 的 分 布 . 直接 证 明 ，an 
的 任何 选取 也 导 不 出 更 有 差别 的 结果 


(b) 如 果 下 是 具有 密度 一 一 一 5 二 = 5) 和 an = n/r 的 柯 西 分 布 , 那么 对 于 z > 0, Gn(z) 一 
oz. 


27 如 果 X 和 了 有 这 样 的 共同 分 布下 , 使 得 对 于 一 个 缓慢 变化 的 地 有 1 一 P(z) ~ zrL(z)， 
那么 当 t 一 co 时 P{X > tlX 十 工 > 甘 一 5. 粗略 地 说 ， 和 的 大 数值 好 像 是 由 于 两 个 
变量 之 一 的 贡献 .了 

28. 在 本 56 上 令 v > 0,a > 0, 并 假设 


Jim [a(t)v(tz) + b(t)z] = z(z) 


存在 且 连 续 地 依 琅 于 z. 对 于 固定 的 zo > 0, 证 明 于 2 -22) 是 正则 变化 的 . 证 明 ， 
如 果 v 本 身 不 是 正则 变化 的 [在 这 种 情形 下 , z(z) = .ze + ciz], 那么 或 者 z(z) = 
或 者 z(z) = cz+ciz in z. 

29. 设 G 是 对 称 稳定 分 布 , 即 G"(crz) = G(z)( 见 6.1 节 ). 用 8.8 节 最 后 一 个 系 来 证 明 ， 
如 果 rfL - G(crz)jt 不 趋 于 0, 那么 1 - G(z) ~ z-*L(z) (其 中 a < 2)， 而 且 当 
7[1 一 Glerz)]t 一 0 时 , G 是 正 态 分 布 . 

[提示 : 根据 5.5 节 (5.13) 对 称 化 不 等 式 , 序列 r[1 - G(crz)] 是 有 界 的 , 其余 的 是 容易 
的 |] 
名 像 这 样 的 现象 好 像 是 也. 芳 德 市 罗 首 先 注意 到 的 . 
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30. 把 上 题 推广 到 非 对称 稳 定 分 布 的 情形 . 
31. 设 {Xn} 是 相互 独立 正 随机 变量 序列 ,上 且 具 有 集中 于 0,o6 上 的 共同 分 布 F. 设 W 是 
一 个 泊 松 变量 . 随机 和 Sw = Xi 十 … 十 Xw 有 复合 泊 松 分 布 


U=e Dr". 


设 工 在 无 穷 远 处 是 缓慢 变化 的 . 证 明 : 
如 果 1 一 F(z)~z-?L(z), 则 1-U(z) ~ ce-?L(z). 
[提示 : 显然 P{Sw > zf} 大 于 诸 分 量 中 恰 有 一 个 X; > z 的 概率 , 即 


1—U(z) > cll — F(t)Je- tr® 0. 


另 一 方面 ， 对 于 充分 大 的 z， 事件 Sw > z 不 可 能 发 生 ， 除 非 诸 分 量 中 有 一 个 X; > 
(1 一 e)z, 或 至 少 有 两 个 大 于 z2/3 ， 或 最 后 N > z#. 第 2 个 事件 的 概率 是 o(1 一 下 (z))， 
而 NN > ln z 的 概率 比 z 的 任意 每 趋 于 0 的 速度 都 快 ] 
32. 设 FF 是 一 个 原子 型 分 布 , 在 点 2* 上 具有 与 mn 2-2" 成 正比 的 质量 . 证 明 : (9.10) 中 
所 定义 的 Us 是 缓慢 变化 的 ， 并且 U2(o0) = co, 但 是 1 -下 不 是 正则 变化 的 . 
[提示 : 对 于 最 后 一 个 陈述 ,只 要 考虑 跳 耻 度 就 够 了 .] 
注 其 余 的 问题 涉及 正则 变化 概念 的 推广 . ?下 列 定义 提供 了 方便 的 起 点 . 
定义 音调 夯 数 以 在 无 穷 远 处 是 控制 变化 的 ， 如 果 比 u(2z)/u(z) 保持 0 和 oo 以 外 的 
有 界 值 . 
33. 证 明 : 为 使 非 减 函数 u 是 控制 变化 的 ， 当 且 仅 当 存在 常数 4,p 及 to, 使 得 
ultz) 
u(t) 
对 于 非 增 的 u， 只 要 把 = > 1 换 为 > < 1, 同样 的 准则 是 适用 的 . 
34. (9.2 节 定理 2 的 推广 ) 如 同 (9.10) 那样 定义 Uc 和 V5( 这 要 求 -oo < 9 < 4). 令 
R(t) = 7 "Vn(t)/Ue(t). 
证 明 : 为 使 Uc 是 控制 变化 的 , 当 且 仅 当 lim sup R(t) < oo. 类 似 地 , 为 使 V 是 控制 
变化 的 , 当 且 仅 当 lim inf R(t) > 0. 
35，( 续 ) 更 确切 地 说 : 如 果 对 于 t > to，R(t) < M, 那么 


<Arr, t>to, z>1. (10.6) 


Velts) < M+1)z?, z>1,t> 10.7) 

Det) < M+ he”, 't> to, (10.7) 

@ 对 于 进一步 的 结果 和 细节 , 见 W. Feller, One-sided analogues of Karamata’s regular variation, 
in the Karamata Memorial Volume of PEnseignement Mathématique, vol 15(1969) pp, 107- 
121. 又 见 W. Feller, On regular variation and local limit theorems, Proc. Fifth Berkeley 
Symposium Math. Statistics and Probability, vol., 2, Part 1, pp. 373-388(1965-1966). 
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其 中 p= (4 一 ?)M/(M +1. 反之 , 具有 p<C 一 7 的 (10.6) 蕴含 
RE) < MC-ND+P (10.8) 
S$-—n-p 
如 果 把 RR 换 成 它 的 倒数 R-!, 同时 把 比 Ue(tz)/Uc(t) 换 成 w(t)/Va(iz), 那么 上 面 这 
陈述 仍 是 正确 的 . 
36. 证 明 下 列 准则 : 如 果 存 在 一 个 数 s > 1, 使 得 lim inf Uc(st)/Uc(t) > 1, 那么 V5 是 控 
制 变化 的 . 类 似 地 ,如 果 lim inf Vn(t/s)/Va(t) > 1, 那么 Uc 是 控制 变化 的 . 
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本 章 的 目的 是 要 说 明 关于 无 穷 可 分 分 布 、 独 立 增 量 过 程 、 稳 定 分 布 及 其 吸引 域 
的 一 些 基本 定理 , 可 以 由 用 来 证 明 中 心 极限 定理 的 论证 的 一 种 自然 推广 来 推导 . 我 
们 将 用 傅 里 叶 分 析 的 方法 重新 讨论 并 扩充 这 一 理论 ， 因 此 我 们 现在 仅 局 限于 叙述 
一 些 基 本 事实 . 本 章 的 主要 兴趣 是 方法 论 性 质 的 , 即 要 把 现在 的 课题 和 马尔 可 夫 过 
程 的 一 般 理论 联系 起 来 ; 当 可 以 应 用 的 时 候 , 传 里 叶 分 析 的 方法 可 导致 更 深刻 的 结 
果 . 为 了 使 一 些 重要 的 事实 容易 理解 ,一 些 定理 将 被 证 明 2 次 . 因此 ,一般 的 结构 
定理 是 首先 对 方差 存在 的 分 布 半 群 证 明 的 . 这 样 ,9.1 节 ~9.4 节 对 基本 事实 的 陈述 
是 自给 自足 的 

本 章 的 半 群 算 子 是 卷 积 . 其 他 的 半 群 将 在 下 一 章 中 用 新 的 方法 独立 地 考察 


9.1 概 论 


本 章 的 极限 定理 是 中 心 极限 定理 的 一 种 自然 推广 ， 无穷 可 分 分 布 与 正 态 分 布 
有 密切 的 联系 . 为 了 看 出 这 一 点 ,在 稍微 不 同 的 背景 上 重复 8.4 节 中 定理 1 的 证 明 
是 值得 的 . 

这 一 次 我 们 考虑 任意 一 个 三 角形 阵列 {Xi,n}， 其 中 对 于 每 个 n,n 个 变量 9 
Xin,…，Xnn 是 独立 的 ， 且 具 有 共同 的 分 布 Fn. 对 于 行 和 ,我 们 记 Sn = Xan 十 
… 十 Xnn. 在 第 8 章 中 , 我 们 讨论 了 Xk,n = Xkan! 和 Fn(z) = (anz) 这 种 特殊 
情况 . 在 那里 , 行 和 记 为 5. 

在 本 章 中 ,我 们 利用 8.3 节 中 的 算 子 记号 . 因此 ,Sn 是 与 Fs 对 应 的 算 子 ， 筷 
是 与 Sn 的 分 布 对 应 的 算 子 . 最 后 , |lu|| 表示 连续 函数 lu| 的 上 确 界 . 

例 (a) ”中心 极 限定 理 . 假设 存在 这 样 的 数 en 一 0, 使 得 


ba < en, E(X1,n) =0,nE(X?,) = 1. (LD) 
对 于 一 个 具有 3 阶 有 界 导 数 的 函数 u， 我 们 有 恒等式 
no -uo = {EE np fa). (2) 


@ 三 角形 阵列 是 在 6.3 节 中 定义 的 . 应 当 记 住 ,我 们 实际 上 讨论 的 是 分 布 函数 Fie,n; 随机 变量 Xk,n 
只 是 用 来 简化 记号 的 . 因此 , 不 同行 的 变量 不 必 有 任何 联系 (并 且 不 必定 义 在 同一 概率 空间 上 ). 
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根据 假设 , 有 限 测度 ny?Fn{dy} 收敛 于 一 个 集中 在 原点 上 的 概率 分 布 . 积分 号 下 的 
分 式 是 2 的 一 个 连续 函数 , 它 与 3 之 差 小 于 enllu" 小 因此 , 关于 z 一 致 地 有 


nlgnu 一 可 一 Be. (1.3) 


现在 假设 {6m} 是 另外 一 个 算 子 序列 , 使 得 n[6nu 一 世 一 致 地 收敛 于 jue. 那 
么 一 致 地 有 
nlSnu — Bnu] 一 0. (1.4) 
根据 8.3 节 基 本 不 等 式 (3.10)( 以 后 将 经 常 使 用 这 个 不 等 式 ) 
lsu — Brul] < 可 和 u 一 @na， (1.5) 


右边 由 于 (1.4) 而 趋 于 0. 正如 我 们 在 8.4 节 的 定理 1 的 证 明 中 所 看 到 的 ,我们 可 
以 把 g" 取 作 与 方差 为 1/n 的 对 称 正 态 分 布 相对 应 的 算 子 . 于 是 6% = B1， 因 此 
镶 一 B1. 这 样 我 们 证 明了 5 的 分 布 赵 于 正太 分 布 名. p 

仔细 观察 这 个 证 明 的 结构 就 可 以 看 出 , (1.3) 右边 的 形式 不 起 作用 . 假设 我 们 有 
这 样 一 个 阵列 , 使 得 一 致 地 有 


nlSnu — 4) 一 Lu, (1.6) 


其 中 站 是 一 个 任意 固定 的 算 子 , 我 们 的 论证 容许 我 们 把 两 个 满足 (1.6) 的 阵列 加 以 
比较 , 并 且 可 以 得 知 它们 的 行 和 的 渐 近 性 质 是 相同 的 . 如 果 对 一 个 这 样 的 阵列 ，5n 
的 分 布 趋 于 一 个 极限 G, 那么 这 对 于 我 们 所 有 的 阵列 都 是 正确 的 . 我 们 将 证 明 这 总 
是 正确 的 . 
例 (b) 泊 松 分 布 . 设 Xi 以 概率 pn 等 于 1, 以 概率 1 一 pn 等 于 0. 如 果 npn 一 a， 
那么 

m 人 Snu(z) — uz)] = npnlu(z — 1) — uz)] = alu(z — 1) — ulz)]. (1.7) 


这 一 次 我 们 取 Bn 为 与 期 望 为 a/n 的 泊 松 分 布 对 应 的 算 子 . 简单 的 计算 表明 ， 
n[Bnu 一 可 也 趋 于 (1.7) 的 右边 ， 因 此 ， 与 前 面 一 样 ， 我 们 得 到 Siu 一 B61. 于 
是 Sn 的 分 布 趋 于 期 望 为 a 的 泊 松 分 布 .[(1.7) 的 右边 给 出 了 (1.6) 中 算 子女 的 一 种 
可 能 形式 . 关于 简单 三 角形 阵列 的 另 一 个 例子 , 见习 题 2 p> 

在 我 们 这 两 个 例子 中 , 由 于 预先 知道 极限 分 布 ,所 以 我 们 是 很 幸运 的 . 一 般 说 
来 , 将 用 这 样 的 三 角形 阵列 来 确定 极限 ,这样 我 们 将 推导 新 的 分 布 函 数 . 在 第 1 卷 
第 6 章 中 曾 用 这 种 方法 把 泊 松 分 布 定 义 为 二 项 分 布 的 极限 . 

我 们 由 6.3 节 知 道 ， 和 Sn 的 极限 分 布 称 为 无 穷 可 分 的 . 我 们 将 证 明 ， 当 形 如 
(1.6) 的 关系 式 成 立时 ,这样 的 极限 分 布 存 在 ,而 且 还 将 证 明 这 个 条 件 也 是 必要 的 . 
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研究 这 个 问题 的 另外 一 种 方法 依赖 于 对 测度 ny?Fn{dy} 的 研究 ， 在 上 述 两 个 例子 
中 , 极限 测度 是 存在 的 . 在 例 (a) 中 , 它 集中 于 原点 上 ; 在 例 (b) 中 , 它 集中 于 点 1 
上 . 一 般 说 来 , 关系 式 (1.6) 与 这 样 的 测度 2 的 存在 性 有 密切 的 联系 ,这 个 测度 使 
得 ny2Fn{dy} 一 2{dy}, 我 们 将 用 算 子 或 测度 Q(9 可 能 是 无 界 的 ) 来 刻 划 无 穷 
可 分 分 布 的 特征 . 

研究 这 个 问题 的 第 三 种 方法 从 解 下 列 卷 积 方程 开始 : 


QsQ: = Qstts (1.8) 


其 中 Qt 是 一 个 依赖 于 参数 上 > 0 的 概率 分 布 . 
例 (c) 正 态 分 布 和 泊 松 分 布 满足 (1.8), 其 中 + 与 方差 成 正比 .22 节 (2.8) 的 工分 
布 满足 2.2 节 (2.3) 卷 积 性 质 , 它 是 (1.8) 的 一 个 特殊 情形 .对 2.4 节 (4.5)Cauchy 分 
布 和 2.4 节 (4.7) 单 侧 稳定 分 布 导出 的 类 似 的 卷 积 性 质 也 是 (1.8) 的 特殊 情形 . 
对 于 具有 = Qiy 的 三 角形 阵列 , 当 t 跑 亿 了 ,3,… 时 ，(1.6) 成 立 . 我 们 希 
望 ， 当 t 以 任意 的 方式 从 右边 趋 于 0 时 ，(1.6) 者 成立. 
(1.8) 是 于 多 禾 立 增生 过 程 的 基本 方程 (6.4 节 )， 且 与 半 群 理论 有 密切 的 联系 . 
在 这 里 作为 “生成 元 " 出 现 . 原来 这 个 理论 提供 了 讨论 极限 定理 和 无 穷 可 分 分 布 
的 最 简易 的 方法 ,因此 我 们 就 从 它 开始 


9.2 卷 积 半 群 
对 t>0, 设 Qt 是 Ri 中 的 一 个 满足 (1.8) 的 概率 分 布 , tt) 是 对 应 的 算 子 ， 即 
agva= {ue Wray. C1) 
那么 (1.8) 等 价 于 
Qs +t) = ts)att). (22) 


称 满足 (2.2) 的 算 子 族 为 半 群 .[ 它 不 是 群 ,因为 一 般 说 来 吕 (t) 没有 逆 算 子 .] 半 群 的 
算 子 可 以 是 各 种 各 样 的 算 子 . 为 方便 起 见 ， 我 们 用 一 个 词 来 表示 名 (t) 是 与 一 概率 
分 布 对 应 的 这 一 要 求 . 
定义 1 卷 积 半 群 { 口 (t)}( 其 中 t> 0) 是 与 概率 分 布 对 应 的 且 满 足 (2.2) 的 算 子 族 . 
我 们 取 Co[ 一 co, +co] 作为 定义 域 . 算 子 Q(t) 是 转移 算 子 , 即 0 < u < 1 草 含 
0< 避 (tju < 1, 上 且 我 们 有 2(t)1= 1. 
我 们 将 需要 讨论 不 是 对 所 有 连续 函数 都 有 定义 的 算 子 [如 (1.3) 中 的 d2/dz3]. 
幸好 目前 可 以 避免 关于 这 类 算 子 的 精确 定义 域 的 宛 长 讨论 ， 因 为 我 们 需要 考虑 的 
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只 是 这 样 的 函数 4 所 构成 的 类 ,使 得 ve C[ 一 co,col,u 的 各 阶 导 数 都 存在 且 属 于 
C[--co, oo]. 称 这 样 的 函数 为 无 穷 可 微 的 了 ,用 C™ 来 表示 这 样 的 函数 构成 的 类 . 目 
前 我 们 只 考虑 这 样 的 算 子 红 : 定义 在 C~ 上 , 且 使 得 tu es Cs, 因此 所 出 现 的 算 
子 都 可 以 看 作 是 从 Ce 到 C™ 的 算 子 . 对 于 与 概率 分 布 对 应 的 算 子 , 我 们 在 8.3 节 
中 已 经 证 明 , 为 使 $n 一 和 当 上 且 仅 当 对 于 ve C™”,$nu 一 Gu. 我 们 现在 把 这 个 收 
敛 定义 推广 到 任意 算 子 上 . 

定义 2 设 和 和 让 是 从 Cw 到 Cm 的 算 子 . 如果 对 于 每 个 由 E Ceo， 


lmu — Stull = 0, (2.3) 


那么 我 们 就 称 tn 收 化 于 外 用 符号 表示 就 是 tn 一 外 
于 是 (2.3) 说 明 一 致 地 有 mu 一 gu. 反之 ,如果 对 于 每 个 ue Cm, 序列 ft 
一 臻 地 收敛 于 一 个 极限 ve C~, 那么 可 以 用 ttu =v 定 义 一 个 算 子 显然 tn 一 比 
定义 3 称 郑 积 半 群 {D(t)} 是 连续 的 ， 如 果 
OQ(h) = 1, ho 0+, (2.4) 


其 中 1 是 恒 等 算 子 . 在 这 种 情形 下 ,我 们 令 癌 (0) = 1. 
因为 ||(t)ull < lull, 所 以 由 定义 (2.2), 对 于 h>0 有 
t+ Ru — Q(t)ull < NIQR) — |. (2.5) 
对 于 充分 小 的 h, 左边 小 于 一 个 与 + 无 关 的 6. 在 这 种 意义 上 , 连续 卷 积 半 群 是 一 至 
连续 的 . 
定义 4 称 从 Cm 到 Cee 的 算 子 引产 生 一 个 卷 积 半 群 {只 ()}, 如 果 当 有 一 0+ 时， 
h-1[Q(h) — 1 = (2.6) 
等 价 地 ,我 们 称 红 是 一 个 生成 元 . @ 
更 明确 地 说 , 就 是 : 当 极限 存在 时 , 算 子 4 可 由 下 式 定义 : 


Ln lu(z —9) — uz)]QeA{dy} = Hu(z). (2.7) 


显然 , 有 生成 元 的 半 群 自然 地 是 连续 的 . 我 们 将 证 明 所 有 的 连续 卷 积 半 群 都 有 
生成 元 , 但 这 决 不 是 显然 的 . 


@ 类 Ce” 只 是 为 了 避免 新 术语 而 引入 的 . 可 以 把 它 换 为 由 所 有 具有 (例如 )4 阶 有 界 导数 的 函数 所 构 
成 的 类 或 由 所 有 具有 任意 期 望 与 方差 的 正太 分 布 函数 的 线性 组 合 构成 的 类 . 

@ 因为 我 们 把 区 的 定义 域 局 限于 C" ,所 以 我 们 的 术语 与 E. 希 尔 和 非 利 普 斯 (R. S. Phillips) 合 著 
的 书 (1957) 中 叙述 的 标准 用 法 稍 有 不 同 . 
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在 形式 上 , (2.6) 把 定义 为 Q(t) 在 上 = 0 处 的 导数 , 它 的 存在 性 蕴含 在 上 > 0 
处 的 可 微 性 , 因为 当 h 一 0+ 时， 


Q(t+h) — QO) Dk -1 
一 一 人， (2.8) 
对 于 有 hh 一 0- 是 类 似 的 . 

以 后 将 会 用 到 下 列 例子 . 
例 (a) 复合 泊 松 半 群 . 设 


Q:=e 立 Cux (2.9) 


k=0 
是 一 个 复合 泊 松 分 布 . 这 里 
Qh)u—u= (ee — 1)u+ahe-°[Su + (ah/2!)$2u + ]. (2.10) 


用 1/h 滋 上 式 我 们 就 可 看 出 (2.6) 对 上 = a(3 一 1) 成 立 . 因此 ， 复 合 泊 松 半 群 (2.9) 

是 由 a( 一 1) 产生 的 ,我 们 将 用 缩写 式 器 (i) = er(3-D)t 表示 它 的 元 素 . 

例 (b) 平移. 用 T 表示 集中 在 a。 上 的 分 布 , 用 T(a) 表示 对 应 的 算 子 . 对 于 固定 

的 6 > 0, 半 群 性 质 73, 克 Tat = Ta(att 成 立 , (Bt)u(z) = wz 一 Bt).T(Bt)u 的 图 形 

是 通过 平移 u 的 图 形 得 到 的 ， 因此 我 们 称 这 里 的 半 群 为 于 稍 半 群 生成 元 为 -8 二 

注意 ,这 个 生成 元 是 a(3 -1)( 其 中 a = B/h, 下 集中 在 h 上) 当天 一 0 时 的 极限 . 

alg 一 1) 是 一 个 差分 算 子 ， 取 极限 曾 在 7.5 节 中 研究 过 . 用 T(t) = exp (-a3) 表 

示 这 个 半 群 是 很 有 启发 性 的 . 

例 (c) ”生成 元 的 加 法 ， 设 th 和 如 产生 卷 积 半 群 {Q(t)} 和 {2Q2(t)}， 闭 么 
级 十 如 产生 由 算 子 吕 (t) = Dai(tDaz 人 构成 的 卷 积 半 群 . 著 Qi(t) 和 Daz(t) 分 别 与 分 

布 及 和 到 对 应 , 则 名 (与 五 和 三 的 卷 积 对 应 ; 见 8.3 节 定 理 2] 通过 简单 的 

重 排 ， 

Q1(h)Q2(h) — 1 
h 


DQ2(h) 


= S01 + Dlh) 2 1, (2.11) 


断言 是 显然 的 . 

例 (d) 平移 了 的 半 群 .作为 一 个 特殊 情形 ， 我 们 得 到 下 列 法 则 ， 如果 4 产生 一 
个 由 与 分 布 Q, 对 应 的 算 子 扎 (b 构成 的 半 群 ,那么 4 一 Bd/dz 产生 这 样 一 个 半 群 
{ 吕 #()}, 使 得 Q#(z) = Q(z Bt)-. 
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例 (e) 正 坟 半 群 . 设 Qt 表示 期 望 为 0、 方 差 为 ct 的 正 态 分 布 . 正如 已 经 说 过 的 
那样 , 这 些 Q; 确定 一 个 半 群 , 我 们 来 找 它 的 按照 (2.7) 定义 的 生成 元 . 根据 泰勒 公 
式 ， 


uz —Y) — ur) 
= —yu(z)+ i wu" (T) 一 i Su" (x — Oy). (2.12) 


Qt 的 3 阶 绝对 矩 与 既 成 正比 ， 1 因此 我 们 可 以 看 出 ， ] 对 于 具有 3 阶 有 界 导数 的 函 
数 , (2.7) 中 的 极限 存在 且 等 于 3cu"(z). 我 们 用 = Sed?/ae 表示 这 个 算 子 . > 
(关于 进一步 的 例子 ， 见习 是 3~ 习题 5.) 


关于 福 克 - 普 朗 克 方程 的 注 考虑 由 v(t,z) = 吕 (t)f(z) 定义 的 函数 族 ， 关系 式 (2.8) 说 明 ， 
对 于 光滑 的 了 

灵 = 如 . (2.13) 
这 是 过 程 的 福 克 - 普 朗 克 (Fokker-Planck) 方程 , " 是 它 的 满足 初始 条 件 v(0,2) = f(z) 的 
唯一 解 . 方程 (2.13) 描述 了 这 个 过 程 ， 不 必要 的 复杂 化 是 由 于 想 把 (2.13) 换 成 一 个 关于 转 
移 概率 9, 本 身 的 方程 这 一 个 传统 的 试图 引起 的 . 例如 ,考虑 由 处 = a( 和 -1D) 64 产生 
的 平移 了 的 复合 泊 松 半 群 当初 始 本 数 f(z) = v(0,z) 有 连续 的 导数 时 ， 福 克 - 普 朗 克 方 
程 (2.13) 成 立 . 对 于 转移 概率 , 它 的 形式 上 的 类 似 方程 是 


名 一 -82 — aQt + aF 码 Qt (2.14) 


只 有 在 Q 有 和 密度 的 时 候 ， 二 因此 它 不 适用 于 离散 过 程 . 通常 利用 (2.14) 
而 不 利用 (2.13), 显然 这 只 能 产生 麻烦 . 


9.3 预备 引 理 


在 本 节 中 , 我 们 收集 了 整个 理论 所 依赖 的 一 些 简 单 引 理 . 尽管 下 列 不 等 式 非常 
简单 ,但 它们 却 是 很 基本 的 . 
引 理 1 如果 处 和 4I# 分 别 产生 卷 积 半 群 {名 ()} 和 {O#(b}， 那 么 对 于 所 有 的 
*>0, 
上 (bu — Q# (ul < thu 一 5. (3.1) 


证 ”由 半 群 性 和 基本 不 等 式 (1.5), 我 们 得 到 , 对 于 7 = 1,2,…， 
ee 人 


| 


IID(t)u — OQ#(t)ull < > 


(3.2) 
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当 7 一 co 时 , 右边 趋 于 (3.1) 的 右边 , 因此 这 个 不 等 式 是 正确 的 . p 
系 “不同 的 卷 积 半 群 不 可 能 有 相同 的 生成 元 . 
引 理 2 (收敛 .) 对 于 每 个 n, 设 ln 产生 一 个 卷 积 半 群 {名 ,(t)}. 

如 果 ib, 一 外 那么 红 产 生 一 个 卷 积 半 群 {名 ()}, 并 且 对 于 每 个 上 > 0, Qn(t) 一 
Q(t). 
证 对 于 每 个 +>0, 序列 {Qn(t)u} 一 致 收敛 , 因为 根据 (3.1)， 


Qa (Du — Qn(e)ul < ti -Wall. (3.3) 


因此 , 按照 8.3 节 的 准则 1, 存在 一 个 与 一 概率 分 布 对 应 的 算 子 品 (t), 使 得 Qn() 一 
Q(t). 于 是 
Qn(s+t) = Qn(s)Qn(t) = Qs)Q(t) (3.4) 


(根据 8.3 节 的 定理 2), 因此 {Ofb} 是 一 个 卷 积 半 群 . 为 了 证 明 它 是 由 业 产 生 的 ， 
9 二- - | a + lo 由 5 的 串 . 


当 t 一 0 时 , 右边 第 1 项 趋 于 |inw 一 sull. 在 (3.3) 中 , 令 m 一 oo, 我 们 看 出 第 2 

项 < liu - gz, 因此 , 对 于 固定 的 n, 左边 的 上 极限 < 2|lilu 一 4null, 选择 n 充 

分 大 , 可 以 使 21l&u 一 ttnul| 任意 小 . p> 
根据 下 列 引 理 , 似乎 至 少 应 有 : 每 个 连续 卷 积 半 群 都 有 一 个 生成 元 . 

引 理 3 设 {名 ()} 是 一 个 连续 卷 积 半 群 . 如 果 对 某 一 序列 二 ,tp 一 0， 


Qt)—1 


t 一 山 (3.5) 
大 


那么 外 产生 半 群 { 吕 (t)}. 
证 。 称 左边 为 lh. 正如 在 9.2 节 例 (a) 中 所 证 明 的 那样 , 这 个 sk 产生 一 个 复合 泊 
松 半 群 . 根据 上 一 引 理 ， 存在 一 个 卷 积 半 群 {Q#()}, 它 是 由 妈 产生 的 . 为 了 证 明 
名 #(t) = (b)， 我 们 按 (3.2) 中 的 方式 进行 ,以 便 得 到 

lo(rts)u — QO#(rti)ull < rt 于 的 :| 


ku 一 : (3.6) 


令 上 一 o0,7 一 oo, 使 得 rt 一 十 右边 趋 于 0， 左 边 由 于 (2.5) 而 趋 于 ES 
Q#(t)ull. 

上 述 的 几 个 引 理 马上 就 要 被 用 到 . 下 一 个 引 理 之 所 以 被 记录 下 来 ， 是 由 于 它 只 
是 引 理 2 的 一 种 变形 , 证 明 几 乎 是 相同 的 . 我 们 只 利用 w = n 和 t= 1 这 一 特殊 情 
形 , 这 种 情形 将 把 三 角形 阵列 与 卷 积 半 群 联系 起 来 . 
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引 理 4。 对 于 每 个 n, 设 Gn 是 与 概率 分 布 Fn 对 应 的 算 子 . 如 果 
n(Bn 一 了 一 上 山 (3.7) 
那么 让 产生 一 个 卷 积 半 群 {Q(6)} 如 果 史 一 o0, 裕一 二 那么 
从 一 9) (3.8) 


特别 地 ， 侠 一 名 (1). 如 果 nn 局 限于 一 个 序列 ni,n2,…, 那么 引 理 仍然 成 立 . 
证 (3.7) 的 左边 产生 一 个 复合 泊 松 半 群 [9.2 节 例 (a)], 因此 根据 定理 2, 区 是 一 个 
生成 元 . 根据 基本 不 等 式 (1.5)， 


lsmu — Qvn /null < vn/nllnlgnr — yy — n/n)u — ll. (3.9) 
对 于 we C”, 范 数 符号 内 的 每 一 项 都 一 致 地 趋 于 lu- p> 


9.4 ”有 限 方差 的 情形 


具有 有 限 方差 的 分 布 的 半 群 特别 重要 , 它们 的 理论 是 如 此 简单 , 以致 于 值得 特 
别论 述 . 许多 读者 对 较 复 杂 的 一 般 半 群 不 感 兴趣 , 对 于 其 他 的 读者 , 本 节 提供 了 有 
趣 的 介绍 性 的 例子 . 

我 们 考虑 一 个 卷 积 半 群 {Q(t)}, 用 Qt 表示 有 关 的 概率 分 布 . 假设 8; 具有 有 
限 方差 o2(t). 由 半 群 性 知 o2(s + = o?(s) +o?(t), 这 个 方程 ?的 唯一 正解 具有 
02(t) = ct 的 形式 . 

假设 这 样 规定 Qt 的 中 心 , 使 得 Qt 的 期 望 为 0. 那么 2 阶 矩 导出 一 个 由 下 式 定 
义 的 概率 分 布 it; 

QA{dy} = QAdy}. (4.1) 
根据 选择 定理 ， 存 在 一 个 趋 于 0 的 序列 {tn}, 使 得 当 t 跑 遍 这 个 序列 时 , Qt 趋 于 
一 个 可 能 为 亏损 的 分 布 Q. 
因为 Qt 的 中 心 是 这 样 规定 的 , 使 得 其 期 望 为 0, 所 以 我 们 有 恒等式 


a bd i PS 1 
2=1ua = -D+ oey), (2) 


@ 方程 p(s 十 t) = p(s) + p(t) 称 为 险 梅 尔 (Hamel) 方程. 令 u(t) = ee(9)， 我 们 得 到 u(s 十 下 = 
au(s)u(t)， 这 种 形式 的 方程 我 们 已 过 到 几 次 了 , 且 曾 在 第 1 卷 17.6 节 中 讨论 过 ，Qt 的 期 望 也 是 
Hamel 方程 的 解 , 因此 它 或 者 具有 mt 的 形式 , 或 者 非常 奇特 . 见 9.5 节 . 
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被 积 函数 (对 于 固定 的 z) 是 在 原点 取 值 3 wy(z) 的 y 的 连续 函数 . 被 积 函 数 及 其 导 
数 在 无 穷 远 处 等 于 0. 这 蕴含 , 当 t 跑 遍 好 时 , Qt 一 9，(4.2) 中 的 积分 一 致 地 趋 
于 关于 极限 分 布 9 的 类 似 积分 . 根据 9.3 节 引 理 3, 这 意味 着 我 们 的 半 群 有 一 个 生 
成 元 它 由 下 式 给 出 : 


su(z) = of/ E+) oay). 


-oo 


(4.3) 


并 的 这 个 表达 式 是 唯一 的 ,因为 对 于 形 如 


uz)=1+7 Taf(- 7) (4.4) 
的 函数 , 我 们 有 
su(0) =¢ 人 太 Zot. (4.5) 


因此 , 当知 道 ttu 对 于 所 有 的 ue Cee 的 值 时 , 就 可 唯一 地 确定 测度 (1+y)-1Q{dy}， 
从 而 确定 09 本 身 . 

由 这 个 唯一 性 知 ,极限 分 布 9 与 序列 {tn} 无 关 , 因此 当 t 以 任意 的 方式 趋 于 
0 时 , Qu{dy} 一 Q{dy}. 

我 们 将 证 明 , 9 是 一 个 正常 概率 分 布 ,每 个 形 如 (4.3) 的 算 子 是 一 个 生成 元 . 证 
明 依赖 于 包含 在 下 列 例 子 中 的 两 种 特殊 情形 . 
例 (a) ”正太 半 群 ， 当 9 是 集中 在 原点 上 的 概率 分 布 时 ，(4.3) 化 成 tu(z) = 
3cu"(z)， 我 们 在 9.2 节 例 (6) 中 曾 看 到 ， 这 个 41 产生 一 个 由 期 户 为 0、 方 差 为 
ct 的 正 态 分 布 构成 的 半 群 . 容易 直接 验证 , 分 布 0, 趋 于 集中 在 原点 上 的 概率 分 布 . 
例 (b) ”复合 泊 松 半 群 . 设 下 是 集中 在 区 间 |z| > n 上 的 概率 分 布 ， 它 的 期 望 为 
mi, 方差 为 m2. 9.2 节 例 (a) 的 复合 泊 松 半 群 的 分 布 8, 的 期 望 为 amit. 方差 为 
amat 此 半 群 是 由 a(3 - 1) 产生 的 . 根据 9.2 节 例 (dj, 若 重新 定 Q: 的 中 心 , 使 其 
期 望 为 0, 则 这 样 得 到 的 分 布 构成 一 个 半 群 ,这 个 半 群 是 由 


af — 1— mad/dz] 
产生 的 , 即 是 由 
su(z) = / lalz—y) -uz) -yu (oF{ay} (4.6) 
lyi>n 


产生 的 . 利用 记号 的 变换 Q{dy} = F{dy}/m2 和 amz = c, 上 式 化 为 (4.3). 反之 ， 
如 果 9 是 集中 在 |z| > 0 上 的 一 个 概率 分 布 , 那么 (4.3) 可 以 改写 为 (4.6) 的 形式 ， 
因此 这 样 的 妇 产 生 一 个 复合 泊 松 半 群 , 它 的 分 布 Qt 的 期 望 为 0, 方差 为 m2t = ct. 
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我 们 现在 可 以 给 出 基本 的 : 
定理 ” 设 Qi 的 期 望 为 0, 方差 为 ct 那么 卷 积 半 群 { 口 (t)} 有 形 如 (4.3) 的 生成 元 
风 其 中 中 是 一 个 正常 概率 分 布 . 表达 式 (4.3) 是 唯一 的 . 反之 ,每 个 这 种 形式 的 算 
子 产 生 一 个 由 期 望 为 0, 方差 为 ct 的 分 布 构成 的 卷 积 半 群 . 
证 ”我 们 已 经 证 明了 形 如 (4.3) 的 生成 元 的 存在 性 , 但 只 证 明了 9 的 总 质量 w < 1. 
剩 下 的 还 需 证 明 , 如 果 Q 的 质量 为 w, 那么 形 如 (4.3) 的 算 子 下 产生 一 个 这 样 的 半 
群 , 使 得 Qt 的 期 望 为 0, 方差 < cwt. 

设 4 是 由 (4.3) 通过 从 积分 区 域 中 删 去 区 间 0 < ly| < 9 后 所 得 到 的 算 子 . 用 
m 和 wn 分 别 表示 9 赋予 原点 和 |y| > 7 的 质量 .由 上 例 推出 , 4 是 两 个 算 子 之 
和 ,其 中 第 1 个 算 子 产生 一 个 方差 为 cmt 的 正 态 半 群 , 第 2 个 算 子 产生 一 个 方差 
为 cwnt 的 复合 泊 松 半 群 . 根据 9.2 节 例 (c) 的 加 法 法 则 , 算 子 i 本 身 产生 一 个 方 
差 为 c(m 十 wn)t 的 半 群 . 作为 一 0 时 纠 的 极限 , 算 子 本 身 是 一 个 半 群 的 生成 
元 . 对 应 分 布 的 方差 位 于 对 应 于 4 的 方差 c(m + wn)t 与 它们 的 极限 cwt 之 间 . 这 
就 证 明了 以 确实 产生 一 个 方差 为 cwt 的 半 群 . > 
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在 本 节 中 , {只 ()} 表示 一 个 任意 的 连续 卷 积 半 群 ,对 应 的 分 布 函数 仍 用 Q: 表 
示 , 从 (4.1) 类 推 , 我 们 用 


QA{dy} = ty Qe {dy} (5.1) 


定义 一 个 新 测度 Q:， 新 的 特点 是 ， 在 Qt 不 存在 二 阶 和 矩 的 情况 下 ， 测 度 9 在 全 
直线 上 未 必 是 有 限 的 . 但 是 ， 对 于 每 个 有 限 区 间 7, 9e{7T} 是 有 限 的 . 此 外 ， 因 为 
Qi{dyj= 翅 -2Qe{dy}, 所 以 y7? 在 不 包含 原点 的 一 个 邻 域 的 任 一 区 域 上 是 关于 Qt 
可 积 的 . 我 们 将 看 到 ， 当 t 一 0 时 , 测度 9 将 收敛 于 一 个 具有 类 似 性 质 的 测度 Qu， 
这 个 9 将 确定 一 个 半 群 的 生成 元 . 因此 , 为 方便 起 见 ， 引 入 下 列 的 

定义 ” 称 实 直 线 上 的 一 个 测度 0 为 标准 的 ,如果 对 于 有 限 区 间 I,Q{I} < oo, 并 且 
对 于 每 个 ,积分 


村 加 = nnn = [voy) (5.2) 


收敛 . 

(为 了 确定 起 见 , 我 们 把 积分 区 间 取 为 闭 的 .) 

我 们 着 手 证 明 , 除了 我 们 必须 讨论 标准 测度 而 不 是 概率 分 布 , 和 在 期 望 不 存在 
的 情形 下 我 们 应 当 利用 人 为 的 定 中 心 外 , 上 节 的 理论 可 以 照搬 过 来 . 我 们 把 截 尾 函 


266 第 9 章 无 穷 可 分 分 布 与 半 群 


数 7。 定义 为 这 样 的 连续 单调 函数 , 使 得 


/zz， 当 lz| <s 时 ， 
Ti(z) = { ee (5.3) 
其 中 s > 0 是 任意 固定 的 . 
与 (4.2) 类 似 , 我 们 现在 有 等 式 
29- 1(z) - uz —Y)— 人 — Te(y)u'(z) Qs{ay} + bow (2), (5.4) 
其 中 本 局 
b= J TWYyT Ne{dy} = 了 Ts(Y)Qe{dy}. (5.5) 


(5.4) 中 的 被 积 函 数 (对 于 固定 的 z) 也 是 一 个 在 原点 取 值 3 "(Zz) 的 有 界 连续 函数 . 
注意 , 截 尾 函 数 的 特殊 选择 (5.3) 是 不 重要 的 : 我 们 可 以 把 r 选择 为 任 一 有 界 连续 
函数 ， 只 要 它 在 原点 附近 是 2 次 连续 可 微 的 , 并且 7(0) = 六 (0) = 0,7'(0) = 1. 

我 们 现在 有 一 个 与 上 节 类 似 的 体系 , 我们 来 推导 类 似 的 定理 . 把 Qi 换 为 任 一 
标准 测度 , (5.4) 中 的 积分 仍 有 意义 ,我 们 用 


机 人 se -ue -nto 人 


定义 一 个 算 子 中, 上 标 7 表示 对 截 尾 函数 r 的 依赖 性 .7 的 一 个 变换 (或 定义 (5.3) 
中 点 s 的 一 个 变换 ) 相当 于 把 项 bd/dz 加 到 U7 上 , 因此 算 子 


= +bd/dz (5.7) 


所 成 的 族 与 rm 的 选择 无 关 . 
定理 1 ”每 个 连续 卷 积 半 群 {名 (t)} 都 有 一 个 生成 元 刀具 有 由 (5.6)~(5.7) 确定 
的 形式 , 其 中 QQ 是 一 个 标准 测度 . 

反之 ， 每 个 这 种 形式 的 算 子 其 产生 一 个 连续 的 卷 积 半 群 { 吕 (t)}. 测度 QI 是 唯 
一 的 , 且 当 tt 一 0 时 ,对 于 有 限 区 间 I， 


QT} = AD; (5.8) 


对 于 z> 0, 
-Q(z)] = $s), Q(z) = (7). (5.9) 
@ 在 这 里 以 及 今后 , 我 们 只 对 连续 的 区 间 和 连续 点 去 求 收敛 . 
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证 目前 我 们 沿用 9.1 节 的 记号 . 对 于 每 个 n, 我 们 考虑 n 个 具有 共同 分 布 Qiyn 
的 相互 独立 的 变量 之 和 Sn = Xin 十 … 十 Xnn. 于 是 Sn 的 分 布 为 Qi, 因此 S" 是 
随机 有 界 的 (8.2 节 的 定义 2). 我 们 现在 提前 使 用 9.7 节 的 引 理 1. 据 此 引 理 , 这 区 
含 对 于 每 个 有 限 区 间 I, 诸 测度 Dayn{T} 是 有 界 的 , 并 且 对 于 每 个 e > 0, 有 一 个 相 
应 的 数 a > 0, 使 得 对 于 所 有 的 mn， 


?0 一 Quyn(al+Q@uyn(-al<e (5.10) 


(这 个 引 理 是 十 分 简单 的 , 之 所 以 推迟 它 的 证 明 , 是 为 了 不 中 断 论证 .) 
根据 选择 定理 , 存在 一 个 测度 Q 和 一 列 整数 nk, 使 得 当 t7! 跑 遍 {nx} 时 , 对 
于 有 限 的 区 间 , Qi{T} 一 {I}. 于 是 积分 


uz —Y) — us) — Tly) (7) 
/ pe Qe{dy} 


四 


收敛 于 定义 Un 的 积分 / We) — v0) ~ nl) ay). 记 住 Qs 


{dy} = Qe{dy}， 由 (5.10) 可 以 看 出 ， 如 果 把 a 选 得 充分 大 ， 那 么 积分 

uz —Y) — u(r) — Te(y)u (2) uz —Y) — us) — Te(y) u(r) 
/i 加 有 | 2 
{dy} 可 以 一 致 地 小 .我 们 断言 ,9 是 一 个 标准 测度 ， 当 t"! 跑 遍 {nk} 时 ，(5.4) 
中 的 积分 一 致 地 收敛 于 (5.6) 中 的 积分 . 此 外 , 在 目前 的 条 件 下 ，(5.5) 中 的 量 b 是 
有 界 的 ， 因 此 不 失 一 般 性 ,可 设 序列 {nx} 是 这 样 选择 的 , 以 致 于 当 二 ! 跑 遍 {nk} 
时 , bt 收敛 于 一 个 数 b. 于 是 当 二 ! 跑 遍 {nk} 时 ， 


t"1[Q(t) - 1Ju(z) — Su(z), (5.11) 


这 里 的 收敛 是 一 致 的 . 根据 9.3 节 的 引 理 3, 这 意味 着 半 群 {名 (t)} 是 由 让 产生 的 ， 
因此 当 t 以 任意 的 方式 趋 于 0 时 (5.11) 都 成 立 . 

因此 , 我 们 证 明了 生成 元 女 存 在 , 且 可 以 借助 于 标准 测度 9 以 (5.6)~(5.7) 的 
形式 表示 . 正如 在 上 节 中 那样 , 这 个 表达 式 中 9 的 唯一 性 可 由 下 列 事实 推出 : 对 于 
形 如 (4.4) 的 函数 , 值 gu{0) 由 (4.5) 给 出 (其 中 e 现在 被 吸收 到 Q 中 了 ). 

9 的 唯一 性 蕴含 , 当 t 以 任意 的 方式 逼近 于 0 时 (5.8) 都 成 立 . 此 外 ，(5.10) 保 
证 , 对 于 充分 大 的 z, (5.9) 中 的 量 一 致 地 小 . 这 些 量 由 (5.2) 和 把 9 换 成 Qt 的 类 似 
关系 式 所 确定 . 这 就 证 明了 (5.9) 是 (5.8) 的 一 个 推论 . 

还 需要 证 明 的 是 : 测度 Q 可 以 任意 选择 . 证 明和 有 限 方差 的 情形 一 样 . 与 在 
9.4 节 例 (b) 中 一 样 ， 可 以 看 出 , 如 果 Q 集中 在 gl > 9 > 0 上, 那么 (5.6) 和 (5.7) 
的 算 子 并 产生 一 个 带 有 修改 了 的 中 心 常数 (但 不 具有 有 限 方差) 的 复合 泊 松 半 群 . 
于 是 女 同 样 可 以 表示 为 生成 元 的 极限 , 因而 是 生成 元 . p> 
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例 柯 西 半 群 具有 密度 zw-1t(t? 十 z2)-1 的 分 布 Q 构成 一 个 半 群 . 容易 验证 , (5.9) 
中 的 极限 由 w+(z) = (-z) = zz! 给 出 , xQ 与 勒 贝 格 测度 或 普通 的 长 度 重合 .mw 

下 述 定理 概括 了 无 穷 可 分 分 布 的 各 种 重要 特征 .(v) 部 分 的 证 明 放 在 9.7 节 .( 对 
于 另 一 种 直接 证 明 , 见习 题 11) 这 一 部 分 可 以 向 具有 可 变 分 布 的 三 角形 阵列 作 进 一 
步 的 推广 . ( 见 9.9 节 . 整个 理论 将 在 第 17 章 中 讨论 .) 关于 这 个 理论 的 历史 , 见 6.3 
节 . 
定理 2 ”下列 的 概率 分 布 类 是 恒 等 的 : 

(i) 无 穷 可 分 分 布 ; 

(ii) 与 连续 卷 积 半 群 有 关 的 分 布 ( 即 平稳 独立 增 量 过 程 中 增 量 的 分 布 ); 

(iii) 复合 泊 松 分 布 序列 的 极限 ; 

(iv) 无 穷 可 分 分 布 序列 的 极限 ; 

(v) 三 角 形 阵列 {Xkm]} 中 行 和 的 极限 分 布 ， 其 中 阵列 的 第 n 行 的 变量 是 同 分 
布 的 . 
证 设 {o(b} 是 一 个 连续 卷 积 半 群 . 在 9.2 节 例 (a) 中 已 证 明 , 对 于 固定 的 h > 0， 
算 子 4 = [ 听 (h) 一 /hh 产生 一 个 由 算 子 Qn(t) 组 成 的 复合 泊 松 半 群 . 当 h 一 0 时 ， 
生成 元 tn 收敛 于 生成 元 和 ,因此 根据 9.3 节 的 引 理 2, Qn(t) 一 号 (). 于 是 ,Qt 是 
复合 泊 松 分 布 的 极限 , 从 而 类 (ii) 包含 在 类 (这 ) 中 . 类 (这 ) 显然 包含 在 类 (iv) 中 . 

对 于 每 个 n, 设 G(™ 是 一 个 无 穷 可 分 分 布 . 根据 定义 ，G(") 是 n 个 独立 同 分 
布 的 随机 变 莽 之 和 的 分 布 , 由 此 可 见 序列 {G("} 产生 一 个 (v) 中 所 述 的 三 角形 阵 
列 . 于 是 类 (iv) 包含 在 类 (v) 中 . 在 9.7 节 中 将 证 明 类 (v) 包含 在 类 (i 中 , 因此 类 
(ii)~(v) 是 恒 等 的 . 最 后 ， 所 有 无 穷 可 分 分 布 组 成 的 类 是 类 (iv) 的 一 个 子 类 , 且 包 
会 类 (ii). > 

按照 这 一 定理 , 每 个 无 穷 可 分 分 布 作为 一 个 适当 的 卷 积 半 群 的 分 布 出 现 . 借 
助 于 上 轴 上 尺度 的 适当 改变 ,参数 t 的 值 可 以 任意 地 固定 . 但 是 只 存在 一 个 半 群 
{名 (t)},， 使 得 无 穷 可 分 分 布 已 属于 它 .这 相当 于 说 ， 作 为 F 的 n 重 卷 积 的 表达 式 
五 = Fm* 是 唯一 的 . 这 个 断言 似乎 是 正确 的 , 但 是 需要 证 明 . 事实 上 , 在 它 的 储 里 
叶 理 论 形式 中 , 唯一 性 是 显然 的 , 而 在 目前 的 情况 下 , 证 明 它 将 会 使 我 们 偏离 主题 ， 
而 且 也 没有 什么 启发 性 . 因此 , 我 们 就 不 在 这 里 证 明 这 个 结论 了 . 
在 随机 过 程 中 的 应 用 设 X(b) 是 一 个 平稳 独立 增 量 过 程 (6.4 节 ) 的 变量 , 我 们 把 
Qt 看 作 是 增 量 X(t+ s) 一 X(s) 的 分 布 . 考虑 具有 单位 长 度 的 时 间 区 间 35,3 十 I, 并 
用 点 


8 一 80<sI<.…<sn 一 3 十 1 


把 它 分 成 n 个 长 度 为 mn-: 的 子 区 间 . 那么 P{X(sk) - X(sk-i) > 2} = 1 Qin(z)， 
因此 n[1 - Qun(z)] 等 于 具有 增 基 > z 的 区 间 于 二 , 玉 的 平均 个 数 . 当 n 一 oo 时 ， 
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这 个 平均 个 数 趋 于 y+(z). 为 了 使 讨论 简单 起 见 ， 假 设 对 所 有 的 t, 极限 X(t+) 和 
X(t 一 ) 都 存在 ,并 且 X(t) 位 于 这 两 个 极限 之 间 . 设 束 -m 是 我 们 的 划分 中 包含 
点 上 的 区 间 . 对 于 充分 大 的 mw 增 量 X(sk) 一 入 (sk-:) 将 接近 于 跳 九 大 ( 寺 ) 一 夺 (t 一 )、 
在 直观 上 很 明显 , 极限 +(z) 表 示 在 单位 时 间 内 使 X(t+) 一 X(t--) > z 的 时 麟 的 
平均 个 数 . 这 个 结论 可 以 严格 证 明 , 但 我 们 将 不 进行 仔细 的 讨论 . 由 这 个 结果 推出 ， 
只 有 对 所 有 的 = > 0, 都 有 y+(z) =0 和 W(x) = 0, 间断 的 平均 次 数 才 为 0. 在 这 
种 情形 下 , 9 集中 在 原点 上 , 即 增 量 X(t+ s) 一 X(s) 服从 正 态 分 布 . 对 于 这 样 的 过 
程 , 轨道 是 以 概率 1 连续 的 ( 列 维 - 维 纳 定理 ), 因此 , 轨道 是 以 概率 1 连续 的 ， 当 
且 仅 当 过 程 是 正 态 的 . 

作为 第 2 个 例子 ,考虑 复合 泊 松 过 程 (2.8). 单位 时 间 内 的 平均 跳 聊 次 数 是 a， 
跳跃 度 > z > 0 的 概率 是 1 一 下 (z). 因此 , all - F(z)] 是 跳跃 度 > z 的 跳跃 的 平均 
数 , 这 与 我 们 的 直观 论证 完全 一 致 . 


不 连续 半 群 + 

自然 要 问 , 是 否 存 在 不 连续 的 半 群 。 这 个 问题 没有 什么 实际 意义 ,但 是 答案 却 有 一 定 
的 价值 ， 每 个 卷 积 半 群 { 吕 (t)} 仅 与 某 一 连续 半 群 { 吕 #(t)} 在 中 心 常数 上 有 所 不 同 . 特别， 
如 果 分 布 Qt 是 对 称 的 ,那么 此 六 群 一 定 是 连续 的 .在 一 般 情形 下 , 存在 这 样 一 个 函数 w, 使 
得 由 Qi(z + p()) 定义 的 分 布 Q# 与 一 个 连续 半 群 对 应 . 函数 yp 显然 应 满足 


P(t+ s) = p(t) + p(s). (5.12) 


这 是 著名 的 哈 梅 尔 方程 , 它 的 唯一 连续 解 具 有 ct 的 形式 ( 见 9.4 节 的 脚注 1). 事实 上 , 满足 
(5.12) 的 唯一 的 贝尔 函数 是 线性 的 . 其 他 的 解 确实 非常 奇特 ; 例如 , 一 个 非 线 性 解 在 每 个 区 
间 上 可 以 取 任意 大 和 任意 小 的 值 ,不 可 能 用 分 析 的 方法 通过 极限 过 程 来 表示 它 . 简单 地 说 ， 
应 该 问 在 怎样 的 意义 上 它 才 “ 存 在 ”. . 

回 过 头 来 , 考虑 任 一 卷 积 半 群 {名 (t)} 和 与 分 布 Quy 有 关 的 三 角形 阵列 {Xk,n}. 行 和 
Sn 有 共同 的 分 布 Q1， 因 此 我 们 可 以 利用 上 面 最 后 一 个 引 理 来 选 出 一 个 序列 ni,na …, 使 
得 当 n 跑 遍 这 个 序列 时 , n[ 避 (1/n) 一 了 一 ,其 中 4# 是 一 个 连续 半 群 {D#(t)} 的 生成 
元 . 我 们 可 以 选择 形 如 2" 的 nk. 不 等 式 (3.2) 说 明 , 对 于 任意 大 的 k, 在 所 有 的 t 是 1/m* 
的 倍数 时 ， 即 对 于 所 有 形 如 t = a2-” 的 t( 其 中 a 和 wv 是 整数 ), 窟 (t) = 避 *#(t). 因此 ,总 存 
在 一 个 连续 半 群 { 品 #*(t)}, 使 得 对 于 一 个 稠密 集合 区 中 的 所 有 的 t, 吕 (t) = 全 #(t). 

我 们 现在 可 以 证 明 最 初 的 命题 了 . 选取 这 样 的 e > 0, 使 得 t+ en 在 民 中 , 那么 ， 


AQ#(t+ en) = Q(t+ en) = A(t)Q(en). (5.13) 
当 en 一 0 时 , 左边 趋 于 从 #(t). 因此 只 需 证 明 , 如 果 名 (en) 一 售 , 那么 分 布 忆 集中 在 一 个 点 
上 .在 三 中 选择 这 样 的 点 hn ,使 得 0 < en < hn 且 hn 一 0. 那么 刁 #(jn) = 侣 (hn 一 en) 吕 (en). 
左边 趋 于 便 等 算 子 , 因此 F 确实 只 可 能 有 一 个 增 点 . 
* 有 性 号 的 诸 节 对 理解 下 文 是 不 需要 的 ， 初 读 时 可 略 去 一 译 者 注 
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9.6 ” 例 : 稳定 半 群 
称 半 群 {号 (2)} 是 稳定 的 , 如果 它 的 分 布 具有 形式 
Qt(z) = G(X(z — Bi)), (6.1) 


其 中 和 > 0 和 Bt 是 两 个 连续 地 依赖 于 t 的 常数 ，G 是 一 个 固定 的 分 布 . 显然 ，G 
是 6.1 节 中 定义 的 稳定 分 布 . 稳定 半 群 理论 在 此 处 主要 是 作为 上 节 结 果 的 具体 说 明 
并 记录 下 它们 的 生成 元 的 形式 而 给 出 的 . 在 9.8 节 中 , 将 用 间接 的 方法 独立 地 导出 
本 节 的 结果 . 

由 于 假设 和 :和 bt 的 连续 性 , 知 此 半 群 (如 果 存 在 的 话 ) 是 连续 的 . 当 t 一 0 时 ， 
分 布 Qt 趋 于 集中 在 原点 上 的 分 布 , 因此 和 一 o0, 5: 一 0.(5.14) 中 第 一 个 关系 式 星 
如 下 形式 ， 

-GOstz 一 BO) 一 好 (ap)，z>0. (6.) 
因为 B. 一 0,G 是 单调 的 , 所 以 上 述 关系 式 在 去 掉 Bt 时 也 成 立 , 于 是 (6.2) 可 以 改 
写成 
1— G(X7) 
1— G(X) 
(这 里 假设 1 是 w+ 的 连续 点 , 这 可 以 通过 改变 尺度 来 达到 .) 这 里 (6.3) 式 是 定义 正 
则 变化 的 8.1 节 (8.1) 关系 式 的 一 个 特殊 情形 . 我 们 断言 , 或 者 y+ 恒 等 于 0, 或 者 
尾部 1 一 G 在 无 穷 远 处 是 正则 变化 的 , 且 


yt(z)=ctz，2>0 ct>0. (6.4) 


因此 , 在 正 半 轴 上 , 测度 Q 有 密度 actz-*-1. 因为 9 对 原点 的 有 限 邻 域 赋予 有 限 
质量 , 所 以 0 < a < 2, 并 且 当 z 一 co 时 , y+(z) 一 0. 同 理 , 或 者 - 恒 等 于 0， 
或 者 对 于 z < 0,w-(z) = c llz|*. 对 于 两 个 尾部 , 指数 a 是 相同 的 , 因为 尾部 的 和 
1-G(z)+ G(-z) 也 是 正则 变化 的 . 
函数 y+ 和 Ww"! 确定 了 测度 (在 原点 上 可 能 有 不 同 的 原子 ). 我 们 将 会 看 到 ， 
这 样 的 原子 不 可 能 存在 , 除非 y+ 和 %- 都 恒 等 于 0, 且 Q 集中 在 原点 上 . 
生成 元 区 由 (5.7) 给 出 . 在 目前 的 情形 下 , 把 它 改 写成 下 列 形式 是 方便 的 : 


U=ctit +c hs + bd/dz, (6.5) 


其 中 算 子 tt 和 红 - 表示 两 个 半 轴 的 贡献 ,其 定义 如 下 . 
如 果 0<a<1, 那么 


= +t(z). (6.3) 


suly) = le -uy dy (6.6) 
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如 果 1<a<2, 那么 
stulo) = ele uo) -woe (617) 
最 后 , 如 果 a 二 1, 那么 
于 wa = le) uD) -nl (osay. (6.8) 


4 用 在 二 06,0 上 的 类 似 积分 来 定义 , 只 是 要 把 上 述 的 y-*-! 换 为 ly|-“~1.(6.6) 和 
(6.7) 中 的 中 心 常数 与 标准 形式 (5.6) 中 的 中 心 常数 不 同 , 但 是 其 差 被 并 入 (6.5) 的 
项 bd/dz 中 了 .Q 在 原点 上 的 一 个 原子 将 使 得 生成 元 女 增 加 一 项 rd2/dz?. 在 9.4 节 
例 (a) 已 证 明 , 这 个 项 本 身 产生 一 个 正 态 分 布 半 群 . 
定理 (a) 当 b=0,0<a<1l 或 1<a<2 时 , 算 子 (6.5) 产生 一 个 如 下 形式 的 严 
格 稳定 半 群 : 

Q(z) = Gzt Yi (6.9) 
当 a=1,b=0 时 , 它 产生 一 个 下 列 形式 的 稳定 半 群 : 


Qi(7) = G(zt™! ~ (ct — ce )lnt). (6.10) 


(b) 稳定 半 群 或 者 是 由 (6.5) 产生 的 半 群 ,或 者 是 一 个 正 态 分 布 半 群 . 

[在 9.2 节 例 (b) 中 我 们 已 看 到 ,bd/dz 产生 一 个 平移 半 群 ,而且 为 了 得 到 由 
(6.5)( 其 中 5 关 0) 产生 的 半 群 ， 只 要 在 (6.9) 和 (6.10) 中 把 z 换 成 十 矿 就 行 了 J] 
证 (a) 尺度 的 一 个 改变 将 把 半 群 的 分 布 Q; 变 成 由 Q#(z) = Qe(z/p) 定义 的 分 布 . 
这 些 分 布 构成 一 个 新 的 半 群 {名 #(t)}. 如 果 我 们 设 v(z) = u(pz), 那么 由 卷 积 定义 
可 知 号 #(t)u(z) = 全 (tjv(z/p). 对 于 生成 元 来 说 , 这 意味 着 , 为 了 求 出 U#u(z), 我 
们 只 需 计算 Uv(z) 并 把 > 换 z/p. 在 (6.7) 和 (6.8) 中 利用 代 换 y = z/p 可 知 , 对 于 
相应 的 生成 元 ， 寺 = pelle 因为 pile 显然 是 半 群 { 吕 (pet)} 的 生成 元 , 因此 由 生 
成 元 的 唯一 性 , 我 们 知道 Q(z/p) = Qtpa(z). 令 G = Qup = 二 V8, 我 们 就 可 得 到 
(6.9). 

类 似 的 论证 在 a = 1 的 情形 下 也 适用 ， 所 不 同 的 是 ， 当 在 (6.8) 中 使 用 代 换 
2 = z/p 时 ， 中 心 函数 产生 一 个 形 如 (c+ 一 c)(lnp)w' (z) 的 附加 项 ， 这 就 导致 
(6.10). 

(b) 对 于 集中 在 原点 上 的 测度 Q， 有 一 个 相应 的 正 态 半 群 . 我 们 已 看 到 , 任意 
其 他 的 稳定 半 群 的 生成 元 具有 le + Yd?/dz? 的 形式 . 正如 9.2 节 例 (c) 所 说 明 的 那 
样 ,相应 的 半 群 的 分 布 是 我 们 的 稳定 分 布 Qt 与 方差 为 2Yt 的 正 态 分 布 的 卷 积 ， 显 
然 这 样 的 半 群 不 可 能 是 稳定 的 . p> 


272 第 9 章 无 穷 可 分 分 布 与 半 群 


此 定理 断言 ,在 稳定 半 群 的 定义 中 出 现 的 函数 和 : 具有 X; = tMVe 的 形式 . 考 
虑 (6.2) 以 及 它 在 负 半 轴 上 的 类 似 表 达 式 , 我 们 得 到 
系 如 果 0<a<2, cf>0,c->0( 但 c++c- >0), 那么 恰好 存在 一 个 稳定 分 布 
函数 G, 使 得 当 z 一 co 时 ， 


ze[L- G(zj] 一 or， zeG(-z) 一 c-. (6.11) 


正 坊 分 布 是 唯一 币 下 的 稳定 分 布 并 且 满足 带 有 a 二 2 和 ct = c- = 0 的 (6.11)]. 
括号 内 的 断言 将 在 9.8 节 中 证 明 . 


9.7 具有 同 分 布 的 三 角形 阵列 


对 于 每 个 mw 设 Xi.n,…, Xn.n 是 具有 共同 分 布 ,的 相互 独立 的 随机 变量 . 我 
们 感 兴趣 的 是 和 Sn" = Xin +… 十 Xn 的 可 能 的 极限 分 布 , 但 是 先 研究 极限 分 布 存 
在 的 必要 条 件 , 即 先 研究 序列 {Sn} 是 随机 有 界 的 这 个 要 求 将 是 有 益 的 . 我 们 从 8.2 
节 中 知道 , 称 {5} 是 随机 有 界 的 ， 如 果 对 于 每 个 < > 0, 都 存在 一 个 a, 使 得 对 于 
所 有 的 mwP{lSn| > a} < <. 粗略 地 说 , 即 没有 质量 流 到 无 穷 远 处 去 . 显然 , 这 是 正 
常 分 布 存 在 的 必要 条 件 . 

我 们 将 多 次 地 利用 截 尾 .最 方便 的 是 再 一 次 利用 (5.3) 中 引入 的 截 尾 函数 7， 
以 便 避 免 不 连 续 性 , r, 是 一 个 这 样 的 连续 单调 函数 ,使 得 当 |z| < s 时 ,mi(z) = zi 
当 |z| > s 时 ,ma(z) = 土 s 对 于 这 个 截 尾 函数 ,我 们 令 


Xkn 一 Ta(Xkn)， Xin 一 天 nm 十 大 on (7.1) 


新 变量 依赖 于 参数 *， 虽 然 我 们 的 记号 没有 强调 这 一 点 . 三 角形 阵列 {Xin} 与 三 
角形 阵列 {X”kn} 的 行 和 将 用 5S'% 和 S”。 表示 . 于 是 Sn = 5'n 十 S”n. 变量 Xen 
是 有 界 的 ,对 于 它们 的 期 望 , 我 们 记 


和 = E(X'k,n) (7.2) 
(当然 Bn, 与 上 无关 ). 最 后 我 们 引入 与 9.5 节 的 测度 Qs 类 似 的 测度 , 即 由 下 式 定义 
的 测度 @。: 
Bn{dz} = nz2F, {dz}. (7.3) 
对 于 有 限 区 间 1, B,{7} 是 有 限 的 ,但 是 整个 直线 可 能 有 无 穷 的 质量 . 
似乎 应 该 有 : {Sn} 不 可 能 是 随机 有 界 的 ， 除 非 各 个 分 量 在 下 述 意义 上 变 得 很 
小 : 对 于 每 个 e > 0， 
P{IXkn| > 晤 一 0m 一 oo. (7.4) 
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(左边 与 上 无关) 具有 这 种 性 质 的 阵列 称 为 零 阵 列 . 我 们 将 看 到 , 只 有 零 阵列 可 以 有 
随机 有 界 的 行 和 , 但 是 现在 我 们 引入 (7.4) 作为 初始 的 假设 . 

下 列 引 理 的 “必要 性 ”部 分 曾 被 用 于 9.5 节 定 理 1 的 证 明 中 . 在 那里 , 条 件 (7.4) 
是 满足 的 , 因为 半 群 是 连续 的 . 
引 理 ( 紧 性 ) 零 阵列 {Xkn} 的 行 和 Sn 是 随机 有 界 的 ， 当 且 仅 当 

(i) 对 每 个 有 限 区 间 IT, Bn{T} 是 有 界 的 ; 

全 ) 对 于 较 大 的 z,， 尾部 之 和 


Tn(z) = n[l — Fn(z) + Fn(—2)] (7.5) 


一 致 地 小 . 

换 名 话说， 要求 对 于 每 个 e > 0, 存在 相应 的 一 个 也 使 得 对 于 z > ,T(z) < e. 
(注意 ，T 是 一 个 减 函数 ) 
证 “在 对 称 分 布 Fn 的 特殊 情形 , 条 件 (i) 的 必要 性 从 不 等 式 


Pllsnl > a} > 3(1 ~ exp(-7,(0)) (70) 


可 显然 看 出 [ 见 5.5 节 (5.10)]. 对 于 任意 的 ,我们 利用 熟知 的 对 称 化 . 与 Sn 一 样 ， 
对 称 化 了 的 变量 "5 也 是 随机 有 界 的 ， 因 此 条 件 (ii) 适用 于 对 称 化 了 的 分 布 的 尾 
部 "Ti 但 是 , 对 于 零 阵列 , 很 明显 , 对 于 每 个 56> 0, 最 后 有 oTh(a) > e+ 人 
因此 , 在 任何 情形 下 , 条 件 (i) 都 是 必要 的 . 

假设 条 件 (ii) 是 满足 的 ， 可 以 把 截 属 点 s 选择 得 这 样 大 ， 以 致 对 于 所 有 的 
,Tn(s) < 1 于 是 XLn,…,X”nn 中 不 为 零 的 项 的 个 数 是 一 个 期 望 与 方差 都 小 于 
1 的 二 项 随机 变量 . 因此 , 可 以 挑选 数 N 和 c, 使 得 以 任意 接近 于 1 的 概率 , 在 诸 
变量 Xn 中 不 为 0 的 项 数 小 于 N, 并 且 它 们 都 < c. 这 就 是 说 , 和 5" 是 随机 有 
界 的 . 在 这 些 情况 下 , 为 使 {5,} 是 随机 有 界 的 , 当 上 且 仅 当 {5'%} 是 随机 有 界 的 . 

还 需 证 明 条 件 (i) 是 {5'} 为 随机 有 界 的 充 要 条 件 . 

设 2 = Var(5n). 如 果 on 一 oo, 那么 把 9.1 节 例 (a) 的 中 心 极限 定理 应 用 于 
变量 (X'n - Bn)/on 可 得 , 对 于 较 大 的 n,5'n 的 分 布 是 具有 方差 o2 一 oo 的 渐 近 
正 态 分 布 . 因此 ， 对 于 任 一 有 限 区 间 I,P{S'e 7} 一 0. 同样 的 论证 也 适用 于 子 序 
列 , 并 且说 明了 {5'。} 不 可 能 是 随机 有 界 的 , 除非 Var(S',) 是 有 界 的 . 但 是 , 在 这 
种 情形 下 ， 切 比 雪夫 不 等 式 说 明 {5', - nn} 是 随机 有 界 的 . 为 使 5 是 随机 有 界 
的 , 当 且 仅 当 {nm} 是 有 界 的 . 因为 {Xkn} 是 一 个 零 阵列 , 所 以 Bo 一 0, 因此 nn 
的 有 界 性 蕴含 Var(5) ~ E(S2). 

于 是 我 们 证 明了 E(S2) 的 有 界 性 是 {5'} 的 随机 有 界 性 的 必要 条 件 . 根据 切 


274 第 9 章 无 穷 可 分 分 布 与 半 群 


比 雪夫 不 等 式 , 这 个 条 件 也 是 充分 的 . 但 是 


E(S’?) = ®n {=55} + s27h(s)， (7.7) 
因此 在 目前 这 些 条 件 下 , 条 件 (i) 等 价 于 E(52) 是 有 界 的 这 一 条 件 . > 


{Xk,n} 是 一 个 零 阵列 这 个 假设 只 用 于 对 称 化 方面 对 具有 对 称 分 布 F, 的 阵 
列 可 以 略 去 . 但 是 ,Bn{T} 的 有 界 性 蕴含 E(X%,) = o(n-!). 我 们 容易 从 引 理 推 
出 , 具有 随机 有 界 的 行 和 与 对 称 分 布 的 阵列 一 定 是 零 阵列 . 由 对 称 化 推出 , 在 一 般 
情形 下 , 存在 这 样 的 数 jn( 例 如 Xk,n 的 中 位 数 ), 使 得 {Xkn 一 jn} 是 一 个 零 阵列 . 
换 句 话说 , 适当 地 规定 中 心 将 产生 一 个 零 阵列 . 在 这 个 意义 上 ， 只 有 和 零 阵列 才 是 重 
要 的 . 
例 设 Xkn 服从 期 望 为 Bn、 方差 为 n-! 的 正 态 分 布 , 那么 Sn 一 nBn 服从 标准 正 
态 分 布 . 但 因为 B 是 任意 的 , 所 以 {Sn} 未 必 是 随机 有 界 的 . 这 说 明了 定 中 心 的 重 
要 性 . p 

为 了 理论 上 的 目的 , 可 以 这 样 规定 阵列 的 中 心 , 使 得 对 于 所 有 的 mw bn = 0, 但 
是 所 导出 的 准则 在 具体 情况 下 很 难 利用 . 利用 任意 的 定 中 心 方法 , 准则 涉及 到 非 线 
性 项 , 这 时 准则 不 实用 . 我 们 将 把 这 种 情形 包含 在 17.7 节 中 . 这 里 我 们 采用 折衷 的 
方法 : 我 们 只 要 求 

B2 = o(E(XA4 AD))， 歼 一 oo. (7.8) 

这 个 条 件 似乎 对 在 实际 上 发 生 的 一 切 情形 都 是 满足 的 . 总 之 , 它 是 如 此 地 弱 ， 以 致 
于 通过 适当 的 定 中 心 就 可 以 满足 它 , 而 更 严格 的 要 求 Bn = 0 可 能 需要 复杂 的 计算 . 
定理 设 {Xkn} 是 一 个 使 得 (7.8) 成 立 的 零 阵 列 . 

为 使 存在 中 心 常 数 bn, 使 得 Sn 一 bn 的 分 布 越 于 一 个 正常 极限 ， 当 且 仅 当 存 在 
一 个 标准 测度 Q， 使 得 对 于 每 个 有 限 区 间 ， 


®n{1} — AN{7}, (7.9) 
且 对 于 z > 10， 
nf ~ Fn(o)] = (0), nFn(-7) = (7). (7.10) 
在 这 种 情形 下 ，Sn 一 nfBn 的 分 布 越 于 与 一 个 卷 积 半 群 有 关 的 分 布 Qi， 这 个 卷 
积 半 群 是 由 下 式 定义 的 算 子 其 产生 的 : 


ia- {D+ ne oc 


(7.11) 


证 ”我们 首先 注意 到 ,对 于 任意 的 bs, 引 理 的 条 件 (i) 和 (ii) 是 {5n 一 bn} 为 随机 
有 界 的 必要 条 件 ， 其 证 明 与 引 理 的 证 明 是 一 样 的 ， 只 是 关系 式 E(S) ~ Var(S') 
现在 是 (7.8) 的 一 个 推论 , 而 以 前 我 们 必须 从 5', 的 有 界 性 来 推导 它 . 
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其 次 假设 引 理 的 条 件 满足 . 根据 选择 定理 , 存在 一 个 序列 {nk}, 使 得 当 n 跑 遍 
{nx} 时 , (7.9) 对 有 限 区 间 成 立 . 对 于 一 个 有 限 区 间 0 < a < z < b, 我 们 有 


b 
nlF,(b) — F(a)] = / yn {dy)}, (7.12) 


(7.9) 保证 这 个 量 也 趋 于 一 个 极限 . 条 件 (i 使 我 们 确信 , 只 要 b 充分 大 , n[1 一 Fn(b)] 
将 小 于 任意 的 e > 0. 由 此 推出 , 对 于 0 < a < b < oo, (7.12) 中 的 积分 收敛 于 关于 
9 的 类 似 积分 . 因此 9 是 一 个 标准 测度 , 当 n 跑 遍 {nx} 时 , (7.10) 是 正确 的 . 

我 们 知道 , (7.11) 的 算 子女 定义 了 一 个 卷 积 算 子 半 群 { 避 (t)}. 令 世 是 由 Xin 一 
Bn 的 分 布 Gn 即 Gn(z) = Fn(z + Bn) 导出 的 算 子 . 在 第 1 节 中 已 证 明 Sn 一 nkBns 
的 分 布 趋 于 与 吕 (1) 有 关 的 分 布 81, 因此 只 需 证 明 当 n 跑 遍 {ns} 时 ， 


nlQn —1]—M (7.13) 


就 行 了 . 现在 


OY (7 区 
我 们 利用 含 二 阶 项 的 泰勒 公式 来 表示 dz + B 一 功 . 因为 8。 - 0， 所 以 由 (7.8) 和 
gn{1) 的 有 界 性 推出 n62 一 0. 又 因为 u 是 有 界 的 ， 所 以 


nl€n — lu(z) 
+o0 


=/ eu + nn td, 
其 中 cm 是 一 个 一 致 地 趋 于 0 的 量 , 这 个 积分 可 以 改写 成 (7.11) 的 形式 , 除了 积分 是 
关于 9 而 不 是 关于 9 的 以 外 . 正如 反复 指出 的 那样 , 极限 关系 式 (79)~(7.10) 昔 
会 (7.15) 中 的 积分 收敛 于 (7.11) 中 的 积分 , 因此 当 n 跑 遍 {nk} 时 (7.13) 成 立 . 最 
后 , 包含 Q; 的 半 群 的 唯一 性 说 明 ,我 们 的 极限 关系 式 对 于 任意 的 下 过 方式 n 一 oo0 
都 成 立 , 这 就 完成 了 证 明 . i 
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在 本 节 中 , Xi, X2 是 具有 共同 分 布下 的 独立 变量 . 根据 6.1 节 的 定义 2, 称 分 布 
下 属于 G 的 吸引 域 , 如 果 存 在 这 样 的 常数 an > 0 和 bn, 使 得 ax1(Xi 十 … 十 Xn) 一 bn 
的 分 布 趋 于 G, 其 中 G 是 一 个 不 集中 于 一 点 上 的 正常 分 布 . 尽管 有 6.1 节 和 9.6 节 
中 的 初步 结果 , 我 们 还 是 从 头 开 始 人 氢 述 这 个 理论 .( 在 17.5 节 中 , 我 们 将 独立 地 更 详 
细 地 氢 述 这 个 理论 .) 
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在 本 节 中 , 我 们 利用 记号 
vm = / vrteu, s>0. GD 


由 8.8 节 中 的 正则 变化 的 理论 知道 , 称 定义 在 了 06 上 的 正 函 数 工 在 无 穷 远 处 是 组 
慢 变化 的 , 如 果 对 于 z > 0， 
L(sr) 
L(s) 
定理 1 分 布 已 属于 某 个 分 布 G 的 吸引 域 ， 当 且 仅 当 存 在 一 个 缓慢 变化 的 工 ,使 
得 


一 1 s 一 oo. (8.2) 


U(z) ~ z2-eL(z)z oo， (8.3) 
其 中 0<axg2, 而 且 当 a<2 时 ， 


1— F(z) 2 F(-z) 
I-F(G)+P(z) YY I-F(G)+FCz) 一 


(8.4) 


当 a 二 2 时 , 只 要 下 不 集中 在 一 点 上 ,条 件 (8.3) 是 充分 的 . 
我 们 将 会 看 到 , 带 有 a = 2 的 (8.3) 蕴含 向 正 态 分 布 的 收敛 . 这 包含 具有 有 限 
方差 的 分 布 , 但 是 也 包含 许多 具有 无 界 的 缓慢 变化 的 U 的 分 布 [ 见 8.4 节 例 (a)]. 
利用 具有 上 = 2 和 ”=0 的 8.9 节 的 定理 2, 可 以 看 出 ,关系 式 (8.13) 完全 等 
价 于 @ 
2Z2[1 — F(z) + F(—z)] _,2-0 


TO Et (8.5) 
这 意味 着 (8.3) 和 (8.5) 相互 蕴含 . 
当 0<a<2 时 , 我 们 可 以 把 (8.5) 改写 成 形式 
1— F(z)+F(-z) ~ ——2z-°L(z). (8.6) 


@ 对 于 方差 有 限 的 分 布 , 除 下 集中 于 原点 的 情形 外 , U 是 缓慢 变化 的 . 在 所 有 其 他 的 情况 下 , 如 果 把 
下 (z) 换 成 局 (z 十 5), 那么 (8.3) 和 (8.4) 保持 不 变 . 
@ 条 件 (8.4) 对 于 每 个 尾部 分 别 要 求 类 似 的 关系 式 
2 -Fl ， p20, <8(-2) -oa 
TG 一 和 


a U(z) a © 


当 a = 2 时 , 这 些 关系 式 可 由 (8.5) 推出 ，(8.5) 说 明 , 当 a = 2 时 为 什么 不 需要 其 他 的 条 件 . 定 
理 1 可 更 简要 地 (但 更 不 自然 地 ) 叙述 如 下 : F 属于 某 一 吸引 域 ， 当 且 仅 当 对 于 0 < a < 2,p 之 
0,9 之 0,p 十 9 二 1,(*) 是 正确 的 . 
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反之 , (8.6) 蕴含 (8.3) 和 (8.5). 这 导致 我 们 重新 叙述 这 个 定理 , 由 于 它 描述 了 各 个 
尾部 的 性 质 , 所 以 它 更 直观 .( 关 于 此 定理 的 另外 的 叙述 方法 ， 见 习题 17.) 
定理 1a (定理 1 的 另 一 种 形式 ). (i) 分 布下 属于 正 态 分 布 的 吸引 域 , 当 且 仅 当 UU 
是 缓慢 变化 的 . 

(让 它 属于 某 个 其 他 的 吸引 域 ， 当 且 仅 当 (8.6) 和 (8.4) 对 于 某 个 0< a< 2 成 
立 . 
证 我们 把 9.7 节 的 定理 应 用 于 服从 分 布 Fn(z) = F(anz) 的 变量 Xk,n = Xk/an 
的 阵列 . 阵列 {Xkn} 的 行 和 为 


Sn = (XI 十 … 十 Xn)/an. 
显然 os co, 因此 {Xn} 是 一 个 零 阵列 .为 了 证 明 条 件 (7.8) 是 满足 的 ， 我 们 设 
oo) = 三 Pta， (87) 


并 注意 到 ， 如果 
u2(z) = o(U(z))， (8.8) 
那么 (7.8) 一 定 成 立 ， 于 是 如 果 当 z 一 co 时 U(z) 一 so， 那么 显然 v(z) = 
olzU(z)),U(z) = olz-?)， 因 此 (8.8) 成 立 . U 是 有 界 函 数 的 情形 是 不 重要 的 , 因为 
我 们 知道 中 心 极限 定理 可 用 于 方差 有 限 的 变 基 . 但 是 即使 对 于 有 界 函数 VU， 只 要 这 
样 规 定 FF 的 中 心 , 使 得 它 的 期 望 为 0, 则 (8.8) 是 成 立 的 . 
上 一 定理 的 条 件 (i) 要 求 9, 对 于 z > 0， 


nazU(anz) = Q{-zzj，m 一 oo， (8.9) 
而 (区 化 成 
n[1— F(anz)] 一 Yt(z), nF(~anz) = y-(—z) (8.10) 
关于 记号 , 见 (5.2)]. 容易 看 出 了， ant1/an 一 1. 因此 , 根据 8.8 节 的 引 理 3, 由 
(8.9) 推出 U 是 正则 变化 的 , 右 极限 与 > 的 某 次 短 成 正比 . 按照 P. 列 维 的 记 法 , 我 
们 用 2 一 a 表示 这 个 等 . 因此 
n{-zzl=Cz <，zZ>0. (8.11) 


@ 照例 我 们 只 对 连续 点 要 求 收敛 性. 
@ 对 于 对 称 分 布 , 这 可 由 下 列 事实 推出 : (Xi 十 … 十 Xn)/an 和 (Xi 十 … 十 Xn)/an+1 有 相同 的 
极限 分 布 . 对 于 任意 的 下, 断言 可 由 对 称 化 推出 . 
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右边 是 z 的 一 个 不 减 函数 , 在 原点 附近 是 有 界 的， 所 以 我 们 有 0 < a < 2. 由 此 推 
出 T 确实 具有 (8.3) 所 断言 的 形式 . 

此 外 , 8.8 节 的 引 理 3 使 我 们 确信 ，(8.10) 中 的 极限 或 者 恒 等 于 0, 或 者 与 的 
某 次 睾 成 正比 . (8.5) 指出 唯一 可 能 的 圭 是 r““. 事实 上 , 当 a = 2 时 , 两 个 极限 都 
恒 等 于 0, 而 对 于 a < 2, 极限 一 定 具有 4z-“ 和 Bz 的 形式 , 其 中 A > 0,B > 0， 
但 4+B>0. 由 此 推出 , 定理 的 条 件 是 必要 的 . 

假设 (8.3) 是 正确 的 , 那么 可 以 构成 这 样 一 个 序列 {an}, 使 得 


maz2U(an) 一 1. (8.12) 


例如 , 我 们 可 以 取 an 为 所 有 使 得 nt 27(b < 1 的 t 的 下 界 . 于 是 (8.3) 保证 , 对 于 
Z>0， 


mnaz2U(anz) 一 72-“. (8.13) 


因此 , 条 件 (7.9) 对 于 形 如 了 = {=z,3} 的 区 间 是 满足 的 . 在 a = 2 的 情形 下 , 极限 
测度 9 集中 在 原点 上 , 因此 对 于 所 有 有 限 区 间 ，(7.9) 是 满足 的 . 在 这 种 情形 下 , 由 
(8.5) 推出 , 条 件 (7.10) 对 于 恒 等 于 0 的 w+ 和 "也 是 满足 的 . 当 a < 2 时 , 关系 
式 (8.3) ~ (8.5) 蕴含 , 当 z 一 co 时 

2 一 a 本 二 全 


T°L(z), F(-7z)~ gq 


1—- F(z)~p zoL(~7), (8.14) 
只 要 p > 0,q > 0.( 在 相反 的 情形 下 , 符号 ~ 应 换 为 “小 o”, 没有 什么 本 质 上 的 变 
化 ) 由 此 推出 , 条 件 (7.10) 成 立 , 这 又 蕴含 (7.9) 适用 于 任意 一 个 到 原点 有 一 个 正 
距离 的 区 间 . > 

值得 注意 的 是 ，9.7 节 的 所 有 结果 都 蕴含 在 本 定理 及 其 证 明 中 , 这 个 证 明 还 可 
导致 其 他 有 价值 的 结果 . 首先 我 们 有 明显 的 ; 
系 ”如果 0 =2, 那么 极限 分 布 是 正 态 的 ， 否则 它 是 满足 (6.11) 的 稳定 分 布 . 在 任 
何 情形 下 ， 它 都 是 确定 的 ( 除 尺度 参数 可 任意 变化 外 ). 

我 们 也 已 看 出 , (8.12) 导致 一 个 可 能 的 正规 化 因子 an 的 序列 . 容易 看 出 , 另 一 
个 序列 {a'n} 是 一 个 正规 化 因子 序列 , 当 且 仅 当 比 a'/an 趋 于 一 个 正极 限 . 

在 定理 1 的 条 件 下 , 我们 建立 了 Sn 一 npn 的 极限 分 布 的 存在 性 ， 其 中 [v 由 
(8.7) 所 确定 ] 


Bn = E(Xk.n) = anlv(san) + sll — F(san) — F(—san)]. (8.15) 


我 们 现在 着 手 证 明 一 个 有 趣 的 事实 : 除了 a = 1 的 情形 外 ,中 心 常数 Bn 实际 上 是 
不 必要 的 . 
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当 a < 1 时 , 我 们 分 别 把 带 有 < =1 和 7=0 的 8.9 节 的 定理 2 应 用 于 两 个 半 
轴 上 , 可 以 得 到 , 当 z 一 00 时， 

a 
1 一 Ga 
由 此 式 和 (8.10) 推出 , mb" 趋 于 一 个 有 穷 极 限 , 因而 不 起 什么 重要 作用 . 

当 a>1 时 , 带 有 6=2 和 ?=1 的 8.9 节 的 定理 2 说 明 环 的 期 望 存在 , 我 们 
自然 要 这 样 定 下 的 中 心 ,使 其 期 望 等 于 0. 于 是 在 积分 (8.7) 中 可 以 把 积分 区 域 换 
成 ly| > z, 我 们 已 经 知道 (8.16) 仍然 成 立 . 因此 Sn 的 分 布 趋 于 一 个 极限 , 这 个 极 
限 的 期 望 也 是 0. 类 似 地 ， 当 a < 1 时 , 极限 分 布 的 中 心 是 这 样 规定 的 ， 以 致 于 它 
是 严格 稳定 的 . 于 是 我 们 证 明了 : 
定理 2 假设 矿 满 足 定理 1 的 条 件 . 如 果 a <1, 那么 "(anz) 一 G(T), 其 中 GG 
是 一 个 满足 (6.11) 的 严格 稳定 分 布 . 如 果 a > 1， 只 要 这 样 规定 下 的 中 心 , 使 其 期 
望 为 0, 那么 也 有 同样 的 结论 成 立 . 

(关于 a = 1 时 的 中 心 常数 , 见 17.5 节 . 关于 下 的 矩 ， 见 习题 16.) 
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我 们 很 简单 地 叙述 一 下 一 般 的 三 角形 阵列 {Xkn}, 其 中 第 n 行 的 变量 ? Xi,n,…， 
Xnm 是 相互 独立 的 , 但 是 有 任意 的 分 布 FF,n. 为 了 保持 我 们 的 极限 定理 的 特点 , 我 
们 只 考虑 零 阵列 : 要 求 对 于 任意 的 mn > 0,e > 0 和 充分 大 的 mw， 

P{IXkn| >7} <e 大 =1 pm (9.1) 


只 要 把 像 nVar(X'kn) 这 样 的 表达 式 换 成 相应 的 和 , 9.7 节 的 理论 就 可 搬 过 来 . 
特别 ， 只 有 无 穷 可 分 分 布 可 以 作为 零 阵列 的 行 和 的 极限 出 现 .验证 可 以 留 给 读者 作 
为 通常 的 练习 题 . 

我 们 来 讨论 一 些 有 趣 的 特殊 情形 . 记号 与 9.7 节 中 的 一 样 , 但 是 下 面 所 用 的 截 
尾 类 型 是 无 关 紧 要 的 ,也 许 最 简单 的 是 把 截 尾 变量 在 |Xk,n| < s 时 定义 为 X'kn = 
Xkhn， 否 则 定义 为 X'%,n = 0, 此 处 截 尾 水 平 s 是 任意 的 . 

第 1 个 定理 是 紧 性 引 理 的 一 个 变形 , 并 且 与 它 等 价 . 
定理 1 (大 数 定律 ) 设 Sn 表示 一 个 零 阵列 的 行 和 . 为 使 存在 这 样 的 常数 加， 使 
得 @ Sn 一 如 卫 0， 当 且 仅 当 对 于 每 个 > 0 和 每 一 个 截 尾 水 平 s， 


V(z) ~ 


zf — F(z) — F(-z)]. (8.16) 


n n 
DP{Xinl > = 0 DVar(X'n) = 0. (9.2) 
k=1 k=1 


@ 关于 第 n 行 的 变量 个 数 , 见 7.13 节 的 习题 10. 
@ 我 们 由 8.2 节 知 道 , 如 果 对 于 每 个 e > 0,P{flZn| > 时 一 0, 那么 Zn 依 概率 收 伍 于 0. 
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在 这 种 情形 下 ,我 们 可 以 取 bn = 》 ECXKAkn). 


k 
作为 一 个 应 用 , 我 们 来 证 明 如 下 的 在 8.5 节 中 已 讨论 过 的 定理 . 
定理 2 (无穷 卷 积 ) 设 页 ,五 ,… 是 具有 分 布 G1,G2，,… 的 独立 随机 变量 ， 和 Th = 
十 … 十 了 的 分 布 Gi 丰 Gz 丰 … 丰 Gn 起 于 一 个 正常 极限 分 布 G， 当 且 仅 当 对 于 
每 个 s> 0， 
DP{lY| > 8} < co， 》 Var(Y) < co， (9.3) 
且 


ECY' 一 mm (9.4) 
k=1 
证 ”对 于 给 定 的 一 列 递 增 整 数 ,v2,… 和 二 1,…,n, 令 Xkn = 了 HK 分 布 
Gi 雄 … 交 Gn 收 化, 当 且 仅 当 所 有 这 种 类 型 的 三 角形 阵列 服从 带 有 中 心 常数 bn = 0 
的 大 数 定律 . 由 定理 1, 条 件 (9.3) 和 (9.4) 显然 是 这 个 结论 的 充 要 条 件 . p 
定理 2 可 以 改 述 如 下 . 
定理 3 ( 科 尔 莫 久 罗 夫 “三 级 数 定理 ”.) 如 果 (9.3) 和 (9.4) 成 立 ， 那 么 级 数 DY 
以 概率 1 收 做 ,否则 级 数 密 隐 以 概率 0 收敛. 
证 假设 (9.3) 和 (9.4) 成 立 ， 根据 7.8 节 的 定理 2，(9.3) 中 的 第 2 个 条 件 保证 
本 [IY' 一 BE(Y'%)] 以 概率 1 收敛 , 于 是 (9.4) 蕴含 次 也 以 概率 1 收敛 . 根据 博 雷 
尔 - 坎 泰利 引 理 ( 见 第 1 卷 8.3 节 ), (9.3) 中 第 一 个 条 件 保 证 以 概率 1 只 有 有 限 多 个 
区 与 Yx 不 同 , 因此 汀 Yi 以 概率 1 收敛 . 
为 了 证 明 我 们 的 条 件 的 必要 性 , 我 们 注意 ( 见 4.6 节 ) 收敛 的 概率 ,或 者 是 0， 
或 者 是 1. 在 后 一 种 情形 下 , 部 分 和 的 分 布 必定 收敛 , 因此 (9.3) 和 (9.4) 成 立 。 


具有 非 平稳 增 量 的 过 程 
本 章 的 半 群 理论 是 讨论 平稳 独立 增 量 过 程 的 一 个 工具 ， 没 有 平稳 性 这 个 条 件 ， 增 量 
X(b 一 X(7) 将 服从 一 个 依赖 于 两 个 参数 t 和 的 分 布 , 我们 必须 讨论 满足 卷 积 方程 


Qn)Q(s,t) = A(7,s), rT<s<h (9.5) 


的 算 子 忆 (~, 昌 (其 中 0 < r < t) 所 组 成 的 依赖 于 两 个 参数 的 族 . 与 这 些 算 子 对 应 的 分 布 是 
无 穷 可 分 的 吗 ? 我 们 可 以 把 5 分 成 n 个 区 间 天 -7 区, 考虑 变量 X (tk) - X(tk-1), 但 是 为 
了 应 用 三 角形 阵列 的 理论 , 我们 需要 条 件 (9.1), 这 个 条 件 相当 于 依赖 于 两 个 时 间 参 数 的 分 
布 的 一 致 收敛 性 . 但 是 从 (7,t) 未 必 连 续 地 依赖 于 t. 事实 上 , 独立 随机 变量 序列 Xi, X2,… 
的 部 分 和 表示 一 个 独立 增 量 过 程 ， 其 中 所 有 的 变化 都 发 生 在 整数 时 刻 ， 因 此 过 程 基 本 上 是 
不 连续 的 . 但 是 在 某 种 意义 上 , 这 是 唯一 的 本 质 上 不 连续 的 类 型 . 形容 词 “ 本 质 上 ”是 很 重 
要 的 ,因为 在 9.5 节 中 已 证 明 过 , 即使 对 于 普通 的 半 群 ,人 为 的 定 中 心 也 可 能 产生 损害 ; 虽 


9.10 习 题 281 


然 这 种 损害 是 无 关 紧 要 的 , 但 在 系统 前 述 时 也 需要 小 心 . 因此 , 为 了 简单 起 见 ， 我 们 只 讨论 
对 称 分 布 并 证 明 
引 理 如果 与 只 (7,t) 对 应 的 分 布 是 对 称 的 ， 那 么 对 于 每 个 t， 单 侧 极限 中 (7,t 一 ) 都 存在 . 
证 令 r< 和 < 妇 <…， 并 且 本 一 .与 全 (7,tn) 对 应 的 分 布 序列 是 随机 有 界 的 ,因此 存 
在 一 个 收敛 的 子 序列 . 去 掉 双 重 的 下 标 ， 我 们 可 以 假设 吕 (7,tn) 一 外 其 中 贸 与 一 个 正常 
分 布 U 对 应 . 由 此 容易 推出 ， 
Qin,tnt1) = 1 

这 蕴含 对 于 任 一 使 得 如 < sn < tn+1 的 时 刻 序列 ,名 (tn,sn) 一 1， 由 (9.5)， 这 意味 着 
从 (7, sn) 一 由, 因此 这 个 极限 芭 与 序列 {tn} 无 关 , 引 理 得 证 . > 

仿效 P. 列 维 的 说 法 , 我 们 称 只 在 上 点 有 一 个 国定 的 不 连续 点 ， 如 果 两 个 极限 名 (7,t+) 
和 外 (r,t-) 不 同 . 由 定理 2 容易 推出 ， 国定 不 连续 点 的 集合 是 可 数 的 .利用 对 称 化 在 一 般 情 
形 下 也 可 推出 , 除了 至 多 可 数 个 时 刻 外 , 不 连续 点 只 是 由 于 定 中 心 引 起 的 〈 而 且 可 以 通过 
适当 的 定 中 心 去 掉 )， 所 有 的 固定 不 连续 点 对 名 (7,t) 的 贡献 是 一 个 无 穷 卷 积 ， 可 以 把 过 程 
分 解 成 一 个 离散 部 分 和 一 个 连续 部 分 .对 于 由 连续 过 程 产生 的 三 角形 阵列 , 利用 定理 2 不 难 
看 出 , 一 致 性 条 件 (9.1) 显然 是 满足 的 , 我 们 得 到 如 下 的 结论 : 与 连续 过 程 有 关 的 分 布 是 无 
穷 可 分 的 .P. 列 维 曾 证 明 , 这 类 过 程 的 样本 函数 在 下 述 意义 上 具有 良好 的 性 质 , 即 在 每 个 时 
刻 t, 左 极限 和 右 极 限 以 概率 1 存在 . 
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1. 证 明 在 9.1 节 例 (a) 中 , 当 n -+ co 时 ，PXR。 卫 1.( 提 示 : 利用 方差 :) 
2. 在 普通 的 对 称 随机 游 动 中 , 设 T 是 首次 通过 +1 的 时 刻 . 换 句 话说 , 了 是 一 个 这 样 的 
随机 变量 , 使 得 


和 2r i 
ptr- -去 ( ); 
考虑 一 个 三 角形 阵列 ,其 中 的 Xn 和 T/n2 有 相同 的 分 布 ， 利 用 9.1 节 的 初等 方法 ， 
由 直接 计算 证 明 
1 /= ue) -us) 
ngouo-vo 一 高 人/ 入 a G0) 


证 明 : 行 和 的 分 布 趋 于 2.4 节 式 (4.7) 中 定义 的 满足 2.4 节 式 (4.9) 卷 积 性 质 的 稳定 分 
布 . 借助 于 一 个 随机 游 动 来 解释 这 个 结果 . 在 这 个 随机 游 动 中 , 步 长 是 土 1/n, 连续 两 
步 之 间 的 时 间 是 1/m”. 
[提示 : 定义 Gnu(z) 的 级 数 可 以 用 积分 来 通 近 :] 

3. 对 于 参数 值 a = 1 考虑 2.2 节 式 (2.2) 中 的 工 分布 . 证 明 : 2.2 节 式 (2.3) 卷 积 性 质 蕴 
会 它们 形成 一 个 具有 生成 元 


Slu(z) = [/ * so) = us) ovay. 
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10. 


11. 


12. 
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的 半 群 . 讨论 没有 定 中 心 项 的 情形 . 


、2.4 节 式 (4.7) 的 单 侧 稳定 分 布 具 有 2.4 节 式 (4.9) 卷 积 性 质 ， 从 而 构成 一 个 半 群 . 证 


明 : 生成 元 由 习题 2 中 (*) 的 右边 给 出 . 


. 设 半 群 的 分 布 Q:, 集中 于 整数 上 并 用 gx(t) 表示 大 的 质量 . 证 明 ， 


Lu(z) = —q (0O)u(z) + Dg (Ou(z —k), 
k#0 


并 与 标准 形式 (5.9) 比较 . 根据 这 个 见解 来 解释 在 第 1 卷 12.2 节 中 得 到 的 无 穷 可 分 分 
布 的 母 函数 . 


. 试 把 9.2 节 的 概念 推广 到 具有 亏损 分 布 的 半 群 . 证 明 , 如 果 女 产生 { 魏 (b}, 那么 -cl 


产生 {e“ 吕 (2)}. 


. 复合 泊 松 分 布 的 记号 exs-0 导致 我 们 一 般 地 记 品 (t) = ee .对 于 正 态 半 群 ， 这 导致 


形式 上 的 算 子 方程 
人 -中 的 wo 


证 明 , 当 v 的 泰勒 级 数 对 所 有 的 z 收敛 且 上 式 右边 的 级 数 对 t > 0 收敛 时 ， 上 式 成 
立 .( 提 示 : 由 4 和 一 个 正 态 分 布 的 卷 积 的 泰勒 级 数 开始 . 利用 正 态 分 布 的 矩 .) 


. 为 使 一 个 半 群 的 分 布 具有 有 限期 望 ， 当 且 仅 当 二 一 关于 出 现在 生成 元 中 的 测度 9 


1+|z| 
是 可 积 的 . 


.直接 证 明 , 如 果 n[Sn 下] 一 外 则 算 子 细 一 定 具 有 生成 元 的 形式 .| 利用 9.4 节 中 考虑 


形 如 (4.4) 的 函数 的 方法 ,但 不 利用 半 群 理论 目的 是 在 还 没有 证 明生 成 元 的 存在 性 
的 情况 下 ,推导 生成 元 的 一 般 形式 ] 


设 Fi 对 两 点 + 都 赋予 概率 3, 则 


ea 
3 2 -1 
xc 

产生 这 样 的 一 个 半 群 , 使 得 Qt(z) = Q(zp), 但 Qi 不 是 稳定 的 (P. 列 维 ). 

(三 角形 阵列 的 行 和 的 极限 分 布 是 无 穷 可 分 的 直接 证 明 .) 设 {Xn} 是 具有 共同 分 布 的 
变量 的 三 角形 阵列 .Sn 的 随机 有 界 性 蕴含 部 分 和 Xi,n +… 十 Xm,n 的 随机 有 界 性 , 其 
中 m 表示 < n/r 的 最 大 整数 . 利用 选择 定理 来 证 明 这 蕴含 5 的 极限 分 布 G 是 一 
个 分 布 的 r 重 卷 积 G". 


对 于 任意 的 尺 和 光滑 的 4， 


jo ft 2 
ll($ — DI < 100(llull + lh pf TrzF {de} + ll. 


13. 


14. 


15. 


16. 


17. 


18. 
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对 于 具有 分 布 F 的 三 角形 阵列 {Xn}, 存在 一 个 具有 复合 泊 松 分 布 
= en 


的 阵列 {X#。} 与 之 对 应 . 证 明 : 当 {Sm} 是 随机 有 界 时 , n[Sn 一 全 #] 一 0. 这 表明 行 和 
Sn 与 5 江 是 渐 近 等 价 的 .因为 5# 的 分 布 与 el"3"-1 有 关 , 所 以 这 就 得 到 了 推导 9.7 节 
主要 定理 的 第 二 种 方法 . 这 种 方法 也 可 应 用 于 具有 可 变 分 布 的 阵列 .( 提示 : 利用 习题 
12.) 

利用 9.5 节 的 记号 , 令 Mn = max[Xi.n,…,Xn,n]， 如 果 5。 有 一 个 极限 分 布 , 证 
明 : y+(z) = -lim In P{M» < z}. 

如 果 Sn 有 极限 分 布 , 则 由 平方 X&。 构成 的 三 角形 阵列 的 行 和 也 有 极限 分 布 . 
(吸引 域 ) 设 已 属于 指数 为 a 的 稳定 分 布 的 吸引 域 . 利用 8.9 节 的 定理 2 证明 : FPF 具有 
所 有 阶 数 小 于 a 的 绝对 矩 . 如 果 a < 2, 那么 阶 数 大 于 a 的 矩 不 存在 . 在 a = 2 时 最 后 
这 个 结论 不 真 . 

( 续 ) 在 8.8 节 中 , 理论 是 以 截 尾 二 阶 矩 函数 为 基础 的 ,但 之 所 以 这 样 做 是 因为 传统 的 
理由 . 8.9 节 的 定理 2 允许 我 们 把 (8.1) 中 的 y? 换 成 具有 另 一 指数 p 的 lyl*, 并 且 对 每 
个 p, 把 (8.3) 和 (8.5) 换 成 等 价 的 关系 式 . 

设 X1,X2,… 是 具有 共同 分 布 F 的 独立 变量 . 如 果 1 - F(z) + (x) 是 缓慢 变化 的 ， 
利用 紧 性 引 理 推导 , 除了 当 G 集中 于 一 点 上 时 以 外 , 序列 Snk/ak + bx 不 可 能 有 极限 
分 布 G. (这 可 用 F 不 属于 部 分 吸引 域 一 语 来 表示 . 见 17.9 节 . ) 提示 : 利用 对 称 化 . 
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本 章 从 马尔 可 夫 过 程 的 最 普通 的 类 型 , 确切 地 说 , 是 从 其 转移 概率 的 基本 方程 
的 最 普通 类 型 的 初步 研究 开始 . 然后 我 们 讨论 波 赫 纳 (Bochner) 的 过 程 的 从 属 的 概 
念 ， 紧 接着 我 们 利用 半 群 来 讨论 马尔 可 夫 过 程 . 所 谓 的 半 群 理论 的 指数 公式 是 联结 
这 些 课题 的 桥梁 . 生成 元 的 存在 性 将 只 在 第 13 章 中 用 预 解 式 理论 来 证 明 . 在 理论 
上 , 现在 的 论述 可 以 包含 上 一 章 的 过 程 和 半 群 作为 特殊 情形 , 但 是 方法 和 用 途 是 不 
同 的 . 这 一 章 的 理论 是 自给 自足 的 , 且 与 第 9 章 是 独立 的 . 这 些 结果 将 在 第 13 章 中 
进一步 阐述 , 但 是 在 本 书 的 其 他 课题 中 没有 用 到 马尔 可 夫 过 程 的 理论 . 

本 章 主要 是 概述 性 质 的 , 既 不 致力 于 一 般 性 , 也 不 致力 于 完整 性 2 特别 地 , 我 
们 不 讨论 样本 函数 的 性 质 , 并 且 在 本 章 中 认为 过 程 一 定 存在 . 我 们 的 兴趣 完全 集中 
在 转移 概率 和 定义 算 子 的 解析 性 质 上 . 

在 8.8 节 和 8.9 节 中 我 们 将 较 一 般 地 论述 变换 的 导出 半 群 的 理论 . 在 前 面 的 各 
节 中 , 基本 空间 是 直线 上 的 区 间或 整个 直线 ,尽管 部 分 理论 可 适用 于 一 般 的 空间 . 
为 了 避免 引入 专门 的 记号 , 我 们 约定 ， 当 不 写 出 积分 限 的 时 候 ， 积 分 是 在 一 个 作为 
基本 空间 的 国定 集合 人 上 进行 的 . 


10.1 伪 泊 松 型 
本 章 , 我 们 的 讨论 局 限于 具有 如 下 定义 的 平 熏 转 移 概 六 Q 的 马尔 可 夫 过 程 : 
Q(z,T) =P{X(t+7) € TIX(7T) = 2}, (1.1) 


其 中 Qt 与 7 无关 . ( 见 6.11 节 . ) 

复合 泊 松 过 程 的 简单 推广 可 导致 这 样 一 类 重要 的 过 程 ， 使 得 所 有 其 他 过 程 都 
可 用 此 类 过 程 来 逼近 . 半 群 理论 依赖 于 这 种 情况 的 分 析 对 应 物 (10.10 节 ). 

设 N(t) 表示 普通 泊 松 过 程 的 变量 在 6.4 节 中 , 复合 泊 松 过 程 是 通过 考虑 随 
机 和 Swtb 而 引入 的 , 其 中 So, S1,… 是 独立 同 分 布 随机 变 基 序列 的 部 分 和 . 伪 泊 松 
过 程 是 以 同样 的 方式 定义 的 ， 只 是 现在 So, 51,… 是 具有 以 随机 核 K 给 出 的 转移 


@ 邓肯 (Dynkin)(1965) 和 洛 埃 韦 (1963) 更 详细 地 论述 了 马尔 可 夫 过 程 的 半 群 理论 ,Yosida (1966) 
包含 半 群 的 解析 理论 及 其 在 扩散 和 坦 历 理论 中 的 应 用 的 简要 介绍 . 
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概率 的 马尔 可 夫 链 的 变量 ( 见 6.11 节 ). 变量 X(t) = Swd) 定义 了 一 个 新 的 随机 过 
程 , 它 在 形式 上 可 氢 述 如 下 . 

在 泊 松 过 程 的 诸 跳跃 之 间 ， 典 型 的 样本 轨道 保持 不 变 . 从 = 向 六 的 转移 可 以 
通过 0, 1,2,… 步 来 实现 , 因此 


Qi(z,T) = er 于 > {kes, IT), t>0. (1.2) 


n=0 
这 就 推广 了 6.4 节 (4.2) 复合 泊 松 分 布 , 并 且 当 9 是 全 直线 ，Sn 是 n 个 具有 共同 
分 布 己 的 独立 随机 变量 之 和 的 时 候 ， 上 式 就 化 为 泊 松 分 布 . 
与 6.4 节 (4.1) 类 似 的 合成 法 则 


Garem= /oanerwmiar>u (3) 


很 容易 用 分 析 方法 加 以 验证 .@ 它 称 为 查 普 曼 - 科 尔 英 葬 罗 夫 方 程 ,说明 从 时 刻 0 
的 z 向 时 刻 t+7 的 本 转移 是 通过 时 刻 7 的 y 后 发 生 的 , 而 且 后 来 的 变化 与 过 去 
独立 .9 [ 见 第 1 卷 17.9 节 , 又 见 6.11 节 (11.3)] 
例 (a) 碰 檀 情况 下 的 质点 . 设 质点 以 匀速 在 均匀 物质 中 运动 , 有 时 发 生 碰撞 . 每 
次 碰 擅 产生 一 个 由 随机 核 K 所 控制 的 能 量变 化 . 如 果 碰 擅 次 数 服从 一 个 泊 松 过 程 ， 
那么 能 基 X(t) 的 转移 概率 具有 (1.2) 的 形式 . 在 我 们 已 经 熟悉 的 关于 空间 的 齐 次 
性 和 缺乏 记忆 性 的 假设 下 , 情况 确 是 这 样 的 . 

通常 假设 在 每 次 碰撞 后 所 损失 的 能 量 与 原来 的 能 量 之 比 是 与 初始 能 量 无 关 的 ， 
这 就 是 说 , K(z,dy) = V{dy/z}, 其 中 Y 是 一 个 集中 在 机 1 上 的 概率 分 布 . 为 了 以 
后 的 应 用 , 我 们 考虑 V(z) = zx 这 一 特殊 情形 . 于 是 天 的 密度 为 


kz,g) = My!, 0<y<z. (1.4) 


当 和 =1 时 , 这 意味 着 损失 的 能 量 与 原来 的 能 量 之 比 是 均匀 分 布 的 . 9 登 核 kon) 已 
在 6.11 节 (11.5) 中 计算 出 来 了 . 代入 (1.2) 可 以 看 出 Q 在 原点 上 具有 质量 为 e-。* 
的 原子 (说 明 无 碰撞 发 生 的 事件 ), 对 于 0 <y < z, 密度 


入 一 1 
,y) = eV Nat— 一 x (2VatMatz7y)), 1.5 
qe(z,y) 一 e sy ET 1( (2/y). (1.5) 
@ 用 含 n 项 的 部 分 和 台 近 Qt 和 Qz, 说 明 (1.3) 的 右边 不 大 于 左边 , 但 是 不 小 于 Qe++ 的 第 mn 个 部 


分 和 . 

@ 有 时 称 (1.3) 是 自然 规律 或 者 复合 概率 的 规律 ,但 是 对 非 马 尔 可 夫 过 程 它 是 不 正确 的 . 见 第 1 卷 
15.13 节 . 

@@ 这 个 假设 曾 被 利用 于 W. Heitier and L. Janossy. Absorption of meson producing nucleons, 
Proc. Physical Soc., Series A, vol. 62 (1949)pp. 374-385, 其 中 导出 了 福 克 - 普 朗 克 方 程 (但 未 
解 出 ). 
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其 中 五 是 27 节 (7.1) 中 定义 的 贝 赛 尔 函 数 .[ 见 10.2 节 例 (a) 和 例 (b). ] 

例 (b) 高速 质点 电离 时 看 失 的 能 量 .Q 考虑 可 以 有 无 穷 大 能 量 的 质点 的 极端 情形 ， 
就 可 得 到 上 例 的 有 启发 性 的 变形 . 这 时 逐次 碰撞 时 损失 的 能 量 是 相互 独立 的 随机 变 
量 , 具有 一 个 集中 在 co 上 的 共同 分 布 V. 如 果 X(t) 是 在 时 间 区 间 0,t 内 的 总 能 
量 损失 , 那么 X(t) 是 一 个 复合 泊 松 过 程 的 变量 . 它 的 转移 概率 由 (1.2) 给 出 ,只 是 
需要 把 其 中 的 K(™ 换 为 卷 积 V"*. 

例 (c) 方向 的 变化 . 代替 质点 的 能 量 , 我 们 可 以 考虑 它 的 运动 方向 并 推导 出 与 例 
(a) 类 似 的 模型 . 主要 的 差别 是 R” 中 的 方向 由 两 个 变量 所 确定 ， 因 此 密度 核 上 现 
在 依赖 于 4 个 实 变量 . 

例 (d) ”2.7 节 例 (b) 的 随机 化 了 的 随机 游 动 , 表示 一 个 局 限于 整数 上 的 伪 泊 松 过 


程 . 对 于 固定 的 整数 z, 核 K 对 于 点 z = 土 1 分 别 赋予 质 量 1/2. Pp 
由 (1.2) 容易 推出 ， 
2 = —aQi(z, I) +a / Q(z,dz)K(z, T). (1.6) 


这 是 科 尔 英 虽 罗 夫 向 前 方程 , 我 们 将 在 10.3 节 中 在 较 一 般 的 背景 下 予以 讨论 . 在 
下 一 节 中 将 证 明 (1.2) 是 此 方程 的 满足 明显 的 概率 要 求 的 唯一 解 . 当 天 有 密度 
时 ,方程 (1.6) 就 化 为 一 种 更 常见 的 形式 . 在 点 > 上 , 分 布 Qt 具有 质量 为 e-% 的 
原子 , e-ot 是 不 发 生变 化 的 概率 ; 除了 这 个 原子 以 外 ,，Q 有 一 个 满足 下 列 方程 的 
密度 qt: 


PD) = -ag(s,0) +o /ale, dK(e, 0)dz. (Le 
如 果 po 是 在 时 刻 0 的 概率 分 布 , 那么 在 时 刻 上 的 分 布 为 
mr} = [ sotar}Qrle, ), (17) 
且 (1.6) 北 合 
= -op{T}+a / pn{dz}K(z, 站 (1.8) 


(1.6) 的 这 一 形式 被 物理 学 家 称 为 福 克 - 普 朗 克 方程 (或 连续 方程 ) 我 们 将 在 

10.3 节 中 分 析 它 的 本 质 . 当 K 和 初始 分 布 jo 有 密度 时 ,pe 也 有 密度 mi， 且 这 时 

福 克 - 普 朗 克 方 程 化 为 
2 的 - ome) + a /mrt 8. (1.8a) 


@ 下 述 论文 的 题目 : L. Landau, J. Physics, USSR, vol. 8(1944) pp. 201-205. 兰 道 (Landau) 使 
用 了 不 同 的 术语 , 但 他 的 假设 和 我 们 的 相同 ,他 导出 了 向 前 方程 (1.6). 
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10.2 ”一 种 变形 : 线性 增 量 


上 述 过 程 的 一 种 简单 变形 经 常 出 现在 物理 学 、 排 队 论 和 其 他 应 用 中 . 关于 跳 妈 
的 假设 与 从 前 相同 , 但 是 瑟 ( 雪 在 诸 跳 聊 之 间 是 以 速度 c 线 性 地 变化 . 这 就 是 说 ,玉昌 一 
ct 是 上 述 伪 泊 松 过 程 的 变量 ; 如 果 Q@: 表示 此 新 过 程 的 转移 概率 , 则 Qi(z, 卫 + ct) 
一 定 满足 (1.6). 所 得 的 Qt 的 方程 具有 不 常见 的 形式 , 但 是 如 果 存 在 可 微 的 密度 ， 
则 它们 满足 常见 的 方程 . 对 于 mz, 我 们 把 (1.8a) 中 的 上 换 为 5+ ct. 利用 变量 替换 
y 二 &€+ct, 我 们 得 到 福 克 - 科 尔 莫 臣 罗 夫 方程 0: 
Sm) -0 —am(y) +a / me(z)k(z,Y)dz. (2.1) 
(1.6a) 的 类 似 方程 可 以 通过 把 项 -cagt/6y 加 到 右边 而 得 到 . 
与 半 群 理论 联系 起 来 ,我们 将 考虑 具有 更 灵活 的 形式 的 福 克 - 科 尔 莫 戌 罗 夫 
方程 , 此 方程 是 与 上 面 的 不 自然 的 可 微 性 条 件 无 关 的 . [ 见 10.10 节 例 (b). ] 
例 (a) 碰撞 情形 下 的 质点 . 在 物理 学 的 文献 中 10.1 节 例 (a) 通常 以 一 种 修正 的 形 
式 出 现 , 其 中 假定 在 诸 碰 撞 之 间 , 能量 由 于 吸收 或 摩擦 而 以 固定 的 速度 消耗 . 只 要 
能 量 的 损耗 与 rm 成 正比 (这 里 mt 表示 时 刻 t 的 能 量 的 概率 密度 ), 则 (2.1) 的 模型 
适合 于 上 述 情况 . 
在 其 他 情形 下 , 物理 学 家 们 假设 , 在 各 次 碰撞 之 间 , 能 量 是 以 与 瞬时 能 量 成 正 
比 的 速度 消耗 的 . 在 这 种 情形 下 , 能 量 的 对 数 以 固定 的 速度 减少 , 一 个 形 如 (2.1) 的 
方程 支配 着 能 量 的 对 数 的 概率 密度 . 
例 (b) 恒星 的 辐射 .2 在 这 个 模型 中 , 变量 t 表示 距离 ,X(t) 表示 通过 空间 的 光 
线 的 强度 . 假设 (在 赤道 平面 内 ) 每 个 体积 单元 以 固定 速度 辐射 ， 因 此 X(t) 是 线性 
增加 的 . 但 是 空间 也 包含 可 以 吸收 光线 的 黑 云 , 我 们 把 黑 云 当 作 点 的 泊 松 总 体 来 对 
待 . 每 束 光线 在 遇 到 黑 云 时 经 受 随 机 性 的 损失 . 在 这 种 情形 下 ,我 们 可 导出 (2.1). 
@ 福 克 科 尔 刘 区 罗 夫 方程 (1.8) 的 许多 特殊 情形 已 被 狼 立 地 发 现 ， 推 广 (2.1) 被 过 分 地 于 以 注 
意 福 克 一 科 尔 划 站 罗 夫 方程 的 一 般 形式 是 科 尔 刘 站 罗 夫 在 他 的 下 列 著名 论文 中 得 到 的 ，Uber die 
analytischen Methoden in der Wahrsche inlichkeitsrechnung, Math. Ann., vol. 104(1931) 
pp. 415-458. 科 尔 英 站 罗 夫 在 此 文中 提 及 了 把 任 意 的 扩散 项 
Fame _ Ome 
Ea 
加 到 右边 的 可 能 性 ，(2.1) 只 是 这 种 可 能 性 的 一 种 特殊 情形 . 即使 最 初 的 存在 定理 也 包含 非 于 稳 情 形 
下 的 一 般 方程. [Feller, Math. Ann., vol 113(1936)] 
名 这 些 物 理 假设 取 自 于 V. A. Ambarzumian, On the brightness fluctuations in the Milky Way, 


Doklady Akad. Nauk SSSR, vol. 44 (1944) pp. 223-226, 在 此 文中 用 间接 的 方法 导出 了 (2.1) 
的 一 种 变形 . 
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似乎 可 能 的 是 (这 是 可 以 证 明 的 ), X(t) 的 密度 ms 趋 近 于 一 稳定 状态 密度 m, 这 个 
m 与 上 无 关 , 且 满 足 把 左边 换 为 0 的 (2.1). 

阿 姆 巴 朱 米 扬 特别 假设 , 在 各 次 通过 黑 云 时 的 光 强度 损失 由 转移 核 (1.4) 控制 . 
在 这 种 情形 下 , 可 得 到 (1.5) 的 显 式 解 , 但 是 它 不 是 重要 的 . 更 重要 的 ( 且 容 易 验证 ) 
是 下 述 事实 : (2.1) 有 与 时 间 无 关 (或 稳定 状态 ) 的 解 , 即 密度 

ax+1 1 
m(y) = (2) FTUY 

这 个 结果 说 明 即 使 不 求 出 显 式 解 ， 也 可 以 从 (2.1) 中 得 到 有 关 的 信息 . 例如 ,容易 
用 直接 积分 来 验证 , 稳定 状态 解 的 期 望 为 cla(1 一 p)]-!, 其 中 是 吸收 分 布 V 的 
期 望 . 
例 (c) ”6.5 节 的 破产 问题 表示 上 是 卷 积 核 这 一 特殊 情形 . 这 些 过 程 的 变 基 是 通过 
把 -ct 加 到 复合 泊 松 过 程 的 变量 上 去 而 得 到 的 . 可 以 对 任意 的 伪 泊 松 过 程 给 出 类 似 
的 破产 问题 , 它们 导致 (2.1). p> 


(a/o)y, y>0. (2.2) 


10.3 跳跃 过 程 


在 伪 泊 松 过 程 中 ， 等 待 下 一 次 跳跃 的 时 间 服 从 固定 的 指数 分 布 ， 它 的 期 望 为 
1/a. 如 果 设 这 个 分 布依 赖 于 轨道 函数 X(t) 现在 的 值 , 就 可 得 到 一 个 自然 的 推广 . 
[在 10.1 节 例 (a) 中 , 这 相当 于 假设 相 碰 的 概率 依赖 于 质点 的 能 基 . ] 这 种 过 程 的 马 
尔 可 夫 性 要 求 这 个 分 布 是 指数 分 布 ,但 是 它 的 期 望 可 以 依赖 于 X(t) 现在 的 值 . 因 
此 , 我 们 从 下 列 基本 公设 开始 . 
基本 公设 给 定 X(t) = z, 等 待 下 一 次 跳跃 的 时 剂 服从 指数 分 布 , 其 期 望 为 1/a(z)， 
并 且 与 过 去 的 历史 独立 . 下 一 次 跳跃 到 达 太 中 的 点 的 概率 等 于 天 (z, 卫 ). 

用 分 析 的 术语 来 说 ， 这 些 公设 导致 过 程 的 转移 概率 Q:(z, 古 ) 的 积分 方程 ( 假 
定 这 样 的 过 程 确实 存在 ). 考虑 一 固定 点 z 和 一 个 不 包含 z 的 固定 集合 T， 事 件 
{X(t) e 站 不 可 能 发 生 , 除非 从 = 出 发 的 第 一 次 跳跃 发 生 于 某 个 时 刻 s < t. 给 定 
这 个 条 件 , {X(t) eT} 的 条 件 概率 可 由 K(z, dy)Q:-s(y, 耳 ) 在 所 有 可 能 的 y 组 成 的 
集合 2 上 的 积分 得 出 . 现在 第 一 次 跳跃 的 时 刻 是 具有 指数 密度 a(z)e-*(*)* 的 随机 
变量 . 对 这 个 密度 积分 , 我 们 得 到 {X(t) e 六 } 的 概率 : 


t 
Gde 门 =aa { eds /Kang 站 (3.18) 
对 于 包含 z 的 集合 也, 我 们 必须 加 上 在 t 前 不 发 生 跳跃 的 概率 , 于 是 得 到 


Q(z,T) = et + a(z) [ “ads 人 K(z,dy) Qs(y, T). (3.1b) 
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这 两 个 方程 分 别 对 于 = 于 三 和 z E 玉成 立 , 它们 是 基本 公设 的 分 析 等 价 物 . 可 
以 用 积分 变量 的 荐 换 7 二 t 一 s 来 简化 它们 . 对 微分 就 可 把 这 两 个 方程 化 成 同一 
形式 , 这 一 对 方程 可 由 下 列 积 微分 方程 来 代替 ， 


ED an)Que D+ on): /Klan). (Ga 
t 了 


这 是 科 尔 莫 戈 罗 夫 的 向 后 方程 ， 它 是 分 析 描 述 的 出 发 点 , 因为 它 避 免 了 区 分 这 
两 种 情形 这 件 麻烦 事 . 

向 后 方程 (3.2) 有 简单 的 直观 解释 ， 这 种 解释 可 以 用 来 以 更 实用 的 术语 重新 级 
述 基本 公设 . 利用 差 商 的 术语 ，(3.2) 等 价 于 


Qirnlz, T) = [1 — a(z)hQe(z, T) + an/ Ke, dy)Qt(y, T)+o(h). (3.3) 


为 了 得 到 这 个 关系 式 的 直观 解释 , 把 在 时 间 区 间 Dit 二 下 内 的 变化 看 作 是 在 初始 短 
区 间 0 8 内 和 后 面 的 长 度 为 上 的 区 间 ht 十 有 内 变化 的 结果 . 那么 很 明显 ，(3.3) 说 
明 , 如 果 X(0) = z,， 那 么 在 0,h 内 发 生 一 次 跳跃 的 概率 是 a(z)h + o(h); 发 生 一 次 
以 上 的 跳跃 的 概率 是 o(h); 最 后 , 如 果 在 0,h 内 确实 发 生 一 次 跳跃 ,那么 可 能 的 转 
移 的 条 件 概率 是 K(z,dy). 这 3 个 假设 导致 (3.3), 从 而 导致 (3.2). 实质 上 , 它们 重 
复 了 基本 公设 .9 

从 概率 的 观点 来 看 ， 向 后 方程 有 点 不 自然 . 因为 在 其 中 终止 状态 起 着 参数 
的 作用 , 且 (3.2) 描述 了 Qt(z, 耳 ) 对 初始 位 置 z 的 依赖 性 . 容易 看 出 , 通过 把 区 间 
0,t 十 五 分 裂 成 一 个 长 初始 区 间 古 t 和 一 个 短 终止 区 间 古 t 十 记 来 推导 一 个 关于 Qi 
的 方程 是 较 自然 的 . 这 样 , 代替 (3.3), 我 们 在 形式 上 得 到 


Qt+n(z,T) = Jet, dz)[1 — a(z)h] + ee, dz)a(z)hK(z,T)+o(h). (3.4) 
从 而 


EC (SD) -人 Qu(z,dz)a(z) 十 人 Q(z, dz)a(z)K(z, I). (3.5) 

这 是 科 尔 SS 四 罗 夫 向 前 方程 (在 特殊 情形 下 被 物理 学 家 称 为 连续 方程 或 福 克 - 
普天 克 方 程 ). 当 a 与 :无 关 时 ， 它 化 为 (1.6). 

这 种 推导 的 形式 上 的 特点 之 所 以 被 强调 ， 是 因为 我 们 的 基本 公设 实际 上 并 不 
蕴含 向 前 方程 . 这 是 因为 (3.3) 中 的 项 o(h) 依赖 于 z, 又 因为 > 是 (3.4) 中 的 积分 变 
基 , 所 以 项 o(h) 应 出 现在 积分 号 下 面 . 但 是 这 样 就 会 出 现 如 下 的 问题 ，(3.5) 中 的 
积分 是 否 收敛 以 及 取 极 限 h 一 0 是 否 合理 .[ 在 向 后 方程 中 不 出 现 这 样 的 问题 ， 因 
为 初始 值 z 是 固定 的 , 并且 由 Q 的 有 界 性 知道 (3.2) 中 的 积分 是 存在 的 . ] 


@ Qt 关于 的 可 微 性 和 发 生 一 次 以 上 的 跳跃 的 概率 是 o(h) 这 个 事实 , 现在 被 叙述 为 一 个 新 的 公设 ， 
它们 被 原来 的 更 复杂 的 阐述 所 蕴含 . 
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把 关于 (3.3) 中 误差 项 的 一 个 适当 条 件 加 到 我 们 的 基本 公设 中 去 ,可 以 证 明 向 
前 方程 , 但 是 这 样 的 推导 会 失去 它 的 直观 上 的 吸引 力 . 此 外 , 提出 包含 实际 中 出 现 
的 所 有 典型 情况 的 条 件 似 乎 是 不 可 能 的 . 如 果 a 是 无 界 函数 ,那么 (3.5) 中 积分 的 
存在 性 就 值得 怀疑 , 这 个 方程 就 不 能 预先 得 到 证 明 . 另 一 方面 , 向 后 方程 是 基本 假 
设 的 必然 推论 ， 因 此 最 好 用 它 作 为 起 点 来 研究 向 前 方程 可 由 向 后 方程 来 推导 的 程 
度 . 

利用 具有 简单 概率 意义 的 逐步 通 近 法 容易 求 出 向 后 方程 的 一 个 解 . 用 Qf (z, 站 
表示 一 个 至 多 有 兄 次 跳跃 的 从 X(0) = z 向 X(D) e 工 转移 的 概率 .无 跳 嘱 的 转移 只 
有 在 z eT 时 才 可 能 , 因为 在 > 上 的 逗留 时 间 服 从 指数 分 布 ， 所 以 我 们 有 


个 =erKO (站 (3.6) 


(其 中 按照 = 是 不 是 包含 在 中 , Ko)(z, 站) 等 于 1 或 0). 其 次 假设 第 一 次 跳 也 发 
生 在 时 刻 。< t 并 且 从 z 跳 到 y. 对 所 有 可 能 的 。 和 y 求 和 ,我 们 得 到 [和 (3.1) 
中 一 样 ] 递 推 公式 

QP 7) = ope, T+/ “eeooatzjds Jeanegwm 67) 
对 n=0,1,… 成立. 显然 Ql < QL 从 而 根据 归纳 法 有 Qt < Q@O < …. 

由 此 推出 ,对 于 每 对 z, ,极限 


人 cm= ,lim, QI™ (z, T) (3.8) 
存在 , 但 可 能 是 无 穷 的 . 我 们 来 证 明 , 实际 上 有 
Qs, 0) <1 (3.9) 


[这 蕴含 , 对 于 2 中 的 所 有 集合 ,84”)(z, P) < 4]. 只 要 证 明 对 于 所 有 的 n， 
Q(z, 9) <1 (3.10) 
就 行 了 . 当 n = 0 时, 这 显然 成 立 . 利用 归纳 法 : 假设 对 于 某 一 固定 的 n, (3.10) 成 
立 , 则 由 (3.7)( 注 意 K 是 随机 的 ) 可 得 
Qt+D(z, 9) < ee 十 人/ ere()sa(z)ds = 1, (3.11) 


从 而 (3.10) 对 于 所 有 的 n 都 成 立 . 
根据 单调 收敛 性 从 (3.7) 可 以 推出 , 896”) 满足 原来 的 积分 形式 的 向 后 方程 (3.1) 
[从 而 也 满足 积 微分 形式 的 向 后 方程 (3.2)]. 对 于 (3.1) 的 任 一 其 他 正解 8:, 显然 


10.3 跳跃 过 程 291 


有 Qt > QW 中 ; 把 (3.1) 和 (3.7) 比较 ,我们 可 知 对 于 所 有 的 n,Q > Q 四 从 而 
Qs > QL*). 因此 , QL 称 为 向 后 方程 的 最 小 解 ; (3.9) 说 明 QL*) 是 随机 的 或 次 随 
机 的 . 

由 (3.8) 推出 , Qf")(c, 站 是 经 过 有 限 多 步 从 z 转移 到 的 概率 . 因此 对 于 次 
随机 解 , 亏 量 1 - 8!~)(z, 2) 表示 以 z 为 起 点 , 在 时 间 t 内 发 生 无 穷 多 次 距 路 的 概 
率 . 从 第 1 卷 17.4 节 和 8.5 节 例 (c) 中 我 们 知道 这 种 现象 发 生 在 某 些 纯 增殖 过 程 中 ， 
从 而 次 随机 解 存在 . 但 与 其 说 它们 是 一 个 规则 , 倒 不 如 说 它们 是 一 个 例外 . 特别 地 ， 
如 果 系数 a(z) 是 有 界 的 ,那么 最 小 解 是 严格 随机 的 ， 即 


QP(c,2)=1 t>0. (3.12) 


实际 上 , 如 果 对 于 所 有 的 z,a(z) < a < co, 那么 可 用 归纳 法 证 明 , 对 于 所 有 的 nn 和 
t>0, 


Q(z, 9) >1— (1— ee)". (3.13) 


当 n=0 时 , 这 显然 成 立 . 假设 对 于 某 个 n, (3.12) 成 立 , 注意 右边 是 一 个 减 函 数 ， 
把 它 表示 为 f(t). 考虑 满足 一 = 8 的 (3.7). 由 (3.13) 知道 , 内 层 的 积分 > f(t), f(t) 
不 依赖 于 积分 变量 . 对 a(z)e-*(*)* 积分 可 得 , 当 把 n 换 为 hn 十 1 时 , (3.13) 也 成 立 . 

最 后 我 们 注意 ， 在 严格 随机 的 情形 (3.12) 下 ， 解 94*) 是 唯一 的 . 事实 上 ,由 
QIe) 的 最 小 性 , 任 一 其 他 的 解 应 满足 


1> Q(z, 0) = Q(z, T) + Qi(z, 2 —T) 
> Q(z, T) + Oz, 9- T) = Q(z, 9) =1, 


这 是 不 可 能 的 , 除非 上 式 中 的 等 号 均 为 不 等 号 . 因此 , 我 们 证 明了 . 
定理 ”向 后 方程 有 一 个 由 (3.8) 所 确定 的 最 小 解 Ql™) ， 此 解 对 应 于 只 经 过 有 限 步 
从 Zz 转移 到 [的 过 程 . 它 是 随机 的 或 次 随机 的 . 

在 次 随机 的 情形 下 ,元 量 1 一 QI”)(z， 9) 是 在 时 间 t 内 发 生 无 穷 多 次 跳跃 的 概率 ， 
在 这 种 情形 下 最 小 过 程 终止 . 

在 严格 随机 的 情形 (3.12) 下 ， 最 小 解 是 向 后 方程 的 唯一 概率 解 ， 当 系数 a{z) 有 
界 时 ， 出 现 这 种 情形 . 

在 20 世纪 30 年 代 这 个 理论 的 早期 阶段 , 亏损 解 的 发 现 是 令 人 震惊 的 , 但 是 它 
推进 了 导致 马尔 可 夫 过 程 统一 理论 的 研究 . 在 无 穷 多 次 跳跃 后 可 以 从 z 转移 到 了 
的 过 程 , 与 具有 边界 条 件 的 扩散 过 程 类 似 , 因此 它们 并 不 像 一 开始 时 看 上 去 那样 反 
常 . 无 穷 多 次 跳 路 的 可 能 性 也 说 明了 直接 推导 向 前 方程 的 难度 .了 向 后 方程 可 以 从 

@ 试 与 第 1 卷 17.9 节 中 的 类 似 讨论 相 比较 . 


(3.14) 
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下 列 假设 推导 : 给 定 现在 的 状态 ,下 一 次 的 跳 婚 发 生 在 服从 于 期 望 为 1/a(z) 的 
指数 分 布 的 等 待 时 间 之 后 . 向 前 方程 依 问 于 在 时 刻 上 t 之 前 的 状态 ， 从 而 依赖 于 整个 
空间 9. 特别 地 , 不 容易 直接 表达 下 列 要 求 : 在 时 刻 上 之 前 存在 最 后 一 次 跳跃. 

但 是 ， 在 附录 中 将 证 明 ， 最 小 解 QI ) 自然 满足 向 前 方程 ， 并 且 也 是 向 前 方程 
的 最 小 解 . 特别 由 此 推出 , 如果 a 是 有 界 的 , 那么 Qf=) 是 向 前 方程 的 唯一 解 . 当 
QL%) 是 次 随机 解 时 ， 存 在 包含 经 过 无 穷 多 次 跳跃 的 转移 且 满 足 向 后 方程 的 各 种 过 
程 . 这 样 的 过 程 的 转移 概率 Qt 可 以 但 不 一 定 满足 向 前 方程 . 这 个 惊人 的 事实 说 明 ， 
在 向 前 方程 不 能 由 (3.4) 导出 的 情形 下 , 向 前 方程 可 能 被 满足 . 

最 后 我 们 再 注意 到 (与 10.2 节 的 过 程 和 包含 对 z 的 导数 的 扩散 过 程 相反 ), 纯 
跳 电 过 程 不 依赖 于 基本 空间 的 性 质 : 我 们 的 公式 适用 于 任 一 个 在 其 上 定义 着 一 个 
随机 核 K 的 集合 8. 
例 可 数 桩 本 空间 . 如 果 随机 变量 X(t) 是 正 的 且 取 整数 值 , 那么 基本 样本 空间 由 
整数 1,2,… 组 成 . 现在 只 要 知道 从 一 个 整数 向 另 一 个 整数 的 转移 概率 Pic(t) 就 行 
了 ; 所 有 其 他 的 概率 可 由 对 求 和 得 到 . 整数 上 的 马尔 可 夫 过 程 理论 曾 在 第 1 卷 
17.9 节 中 讨论 过 , 但 在 那里 还 考虑 了 非 平稳 转移 概率 . 为 了 把 理论 局 限于 平稳 情形 ， 
应 假设 系数 c; 和 概率 Pi 是 与 无 关 的 . 这 样 那里 的 假设 与 现在 的 假设 相同 ,并且 
容易 看 出 , 在 第 1 卷 17.9 节 中 导出 的 两 个 科 尔 莫 龙 罗 夫 方程 是 (3.2) 和 (3.5) 的 特 
殊 情 形 [把 ali) 换 成 ci,K(i,j) 换 成 P]. 第 1 卷 17.4 节 中 的 发 散 增殖 过 程 是 在 有 
限时 间 区 间 内 有 无 穷 多 次 跳跃 的 过 程 的 例子 . 我们 将 在 14.7 节 中 再 回 过 头 来 讨论 
这 个 过 程 , 那 时 将 说 明 存在 这 样 一 个 从 i 到 j 的 转移 , 它 经 历 了 无 穷 多 次 跳 有 


附 景 向 前 方程 的 最 小 解 ， 向 后 方程 的 最 小 解 (~) 的 构造 经 修改 后 可 适合 于 向 前 方程 
我 们 简短 地 指出 怎样 修改 以 及 怎样 验证 两 个 解 事 实 上 是 相同 的 . 细节 留 给 读者 . 
令 
Kt¥ (oT)= {eek (esdy). (3.15) 
有 


为 了 构造 向 前 方程 的 解 , 我 们 用 (3.6) 来 定义 QL, 并 设 
QP 7) =0P 0 n+ [foe anaty) Kt ,7). (3.16) 
, 


这 就 用 最 后 一 次 跳跃 [ 正如 (3.7) 涉及 第 一 次 跳跃 一 样 ] 确定 了 至 多 经 过 n+1 步 的 转移 的 
概率 . 重复 上 一 定理 的 证 明 可 以 看 出 QI = imQ@f” 是 向 前 方程 的 最 小 解 . 


@ 在 14.7 节 中 这 个 理论 是 用 拉 普 拉 斯 变换 的 方法 讨论 的 . (为 简单 起 见 ， 只 讨论 了 可 数 空间 , 但 是 论证 
无 需 作 本 质 上 的 改变 就 可 适用 于 一 般 的 空间 。) 书 中 的 直接 方法 不 大 优美 , 但 有 一 个 优点 , 即 它 也 
适用 于 具有 依赖 于 时 间 参 数 t 的 转移 概率 的 非 平稳 过 程 . 这 种 一 般 形式 的 理论 叙述 见 Feller, Trans. 
Amer. Math. Soc., vol. 48 (1940) pp. 488-515[erratum, vol. 58, p. 474]. 
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虽然 我 们 利用 的 字母 相同 , 但 是 两 个 递 推 公式 (3.7) 和 (3.16) 是 无 关 的 , 并 且 结 果 得 到 
的 核 是 相同 的 这 个 事实 绝 不 是 明显 的 . 为 了 说 明 这 一 点 , 我 们 设 Rn = 9g -88* 了 ,这 
对 应 于 恰好 经 过 n 步 的 转移 . 于 是 (3.16) 化 为 


PoemD= f° [Pesan Kr). (3.17) 
|, 


我 们 用 标准 的 记号 Ph"+D = 及 mg 来 表示 上 式 、 对 于 递 推 公式 (3.7)， 我 们 类 似 地 记 
Pet+D = 奶 PIm， 开 始 的 PO 在 两 种 情形 下 是 一 样 的 【 由 (3.6) 所 确定 ]， 我 们 现在 来 
证 明 , 两 个 递 推 公式 导致 相同 的 结果 . 更 确切 地 说 , 由 Pt"+3 = RD 区 定义 的 PL 也 满足 
Pi+0 = 角 PI". 我 们 用 归纳 法 证 明 , 假设 这 个 断言 对 于 所 有 的 n < r 都 成 立 , 于 是 


PetD = PC = (BP!"D)U = B(P™- YY) = BP"), 


因此 归纳 法 假设 对 n = + 1 也 成 立 . 
因此 , 我 们 证 明了 最 小 解 为 向 后 方程 和 向 前 方程 所 共有 . 


10.4 了: 中 的 扩散 过 程 


在 考虑 了 所 有 的 变化 都 以 跳跃 的 方式 发 生 的 过 程 以 后 , 我 们 转向 另 一 个 极端 ， 
即 样本 函数 是 (以 概率 1) 连续 的 . 它们 的 理论 与 上 节 所 述 的 理论 是 平行 的 , 但 基本 
方程 需要 更 复杂 的 分 析 工 具 . 因此 , 我 们 将 满足 于 向 后 方程 的 推导 以 及 有 关 最 小 解 
和 其 他 问题 的 简要 概括 . 扩散 过 程 的 原型 是 布朗 运动 [ 或 维 纳 过 程 ]. 这 是 一 个 具 
有 独立 正 态 分 布 增 量 的 过 程 . 它 的 转移 概率 密度 为 q(z,y), 此 密度 是 期 望 为 z、 方 
程 为 at 的 正 态 密度 . 其 中 a > 0 是 常数 . 这 些 密度 满足 标准 扩散 方程 

1 mz) 


30 Br2 (4.1) 


现在 来 证 明 , 其 他 的 转移 概率 由 有 关 的 偏 微分 方程 所 决定 . 这 个 推导 的 目的 只 是 为 
了 让 读者 了 解 一 下 过 程 的 类 型 和 有 关 的 问题 ， 从 而 起 一 个 初步 介绍 的 作用 . 因此 ， 
我 们 将 不 致力 于 一 般 性 或 完整 性 . 

由 正 态 分 布 的 性 质 显然 可 见 ， 在 布朗 运动 中 ， 在 长 度 为 t 的 短 时 间 区 间 内 的 
增 量具 有 下 列 性 质 ，(i) 对 于 固定 的 6 > 0, 位 移 大 于 6 的 概率 是 ol(t); (ii) 位 移 的 
期 望 是 0; ( 疝 ) 它 的 方差 是 at. 我 们 保留 第 1 个 条 件 , 但 改变 其 他 条 件 使 之 适用 于 
非 均匀 介质 . 也 就 是 说 , 我 们 令 a 依赖 于 z 并 容许 有 非 零 的 平均 位 移 . 在 这 种 情形 
下 , 位移 的 期 刻 与 方差 不 与 t 严格 成 正比 , 我 们 只 能 假设 在 给 定 X(7) = z 时 ,位 
移 X(tt+7) 一 X(r) 的 期 望 为 b(z)t+olt), 方差 为 a(z) +olt). 矩 不 一 定 存在 , 但 是 
由 第 1 个 条 件 知道 , 考虑 截 尾 矩 是 很 自然 的 . 这 样 考虑 可 导致 下 列 的 ， 
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转移 概率 Qt 的 公设 了 对 于 每 个 5 > 0, 当 t 一 0 时 ， 


所 
a) 0 (2 
/ody) = be), (4.3) 
ly 一 z|<5 
t-1 f (y -2)°Qe(z, dy) = alz). (4.4) 
ly—zl<5 


注意 , 如 果 (4.2) 对 于 所 有 的 5 > 0 都 成 立 , 那么 (4.3) 和 (4.4) 中 的 量 的 渐 近 性 质 
与 6 无关 , 因此 在 最 后 两 个 关系 式 中 可 以 把 5 换 成 1. 

第 一 个 条 件 保证 大 位 移 是 不 可 能 的 ， 它 是 在 1936 年 引入 的 ， 当 时 人 们 希望 它 
是 样本 函数 连续 的 充 要 条 件 .2 为 纪念 林 德 伯 格 , 这 个 条 件 以 他 的 名 字 命 名 , 因为 
它 与 中 心 极限 定理 中 的 林 德 伯 格 条 件 类 似 . 可 以 证 明 , 在 关于 转移 概率 的 适当 的 正 
则 性 条 件 下 ，(4.3) 和 (4.4) 中 的 极限 的 存在 性 确实 是 (4.2) 的 推论 . 我 们 将 不 讨论 
这 些 细节 ， 因为 现在 我 们 对 发 展 系 统 的 理论 不 感 兴趣 . 9 我 们 的 一 般 目 的 是 说 明 最 
简单 情况 下 扩散 方程 的 性 质 和 经 验 意义 . 为 此 目的 , 我 们 来 说 明 怎样 由 (4.2)~(4.4) 
形式 地 推导 一 些微 分 方程 , 但 是 我 们 将 不 讨论 在 什么 条 件 下 这 些 方程 有 解 .@ 因此 ， 
系数 a 和。 可 以 取 为 有 界 连续 函数 , 并且 a(z) > 0. 

我 们 取 直线 上 的 有 限 或 无 限 区 间 7 为 基本 空间 , 并 保持 下 述 约定 : 当 积分 限 不 
出 现时 , 积分 是 在 区 间 7 上 进行 的 . 为 了 简化 写法 并 为 半 群 理论 的 应 用 做 准备 , 我 
们 引入 变换 


ul 可 = [ Qies uoly) (4.5) 
(对 于 固定 的 t), 它 把 有 界 连 续 的 “初始 函数 ”uo 变 成 值 为 u(t, z) 的 函数 @. 


@ 爱 因 斯 坦 首先 由 概率 假设 推导 出 了 (4.1). 科 尔 莫 总 罗 夫 在 他 的 1931 年 的 著名 论文 中 给 出 了 向 后 
方程 (4.6) 和 向 前 方程 (5.2) 的 第 1 个 系统 的 推导 ( 见 10.2 节 ). 本 书 中 的 改进 了 的 公设 应 归功 于 
费 勒 (1936), 他 给 出 了 第 1 个 存在 性 证 明 并 研究 了 两 个 方程 之 间 的 关系 . 

@ 这 个 推测 被 D. Ray 所 验证 . 名 

@@ 现代 半 群 理论 使 作者 能 推导 出 满足 林 德 伯 格 型 条 件 的 马尔 可 夫 过 程 的 最 一 般 的 向 后 方程 (生成 元 ). 
古典 的 微分 算 子 可 换 成 现代 的 形式 , 其 中 “自然 尺度 " 接替 了 系数 的 角色 ,速率 测度 " 接 答 了 a 
的 角色 . 这 些 过 程 是 EE. B. 邓肯 及 其 学 派 的 富有 成 果 的 研究 的 对 象 , 也 是 伊 蕊 清 (K. Ito) 和 英 克 钦 
(HL. P. McKean) 的 富有 成 果 的 研究 的 对 象 .在 参考 文献 中 引用 的 这 些 作者 的 书 中 , 叙述 了 整个 理 
论 . 

@@ 关于 用 拉 普 拉 斯 变换 的 方法 处 理 扩散 方程 , 见 14.5 节 . 

@ 用 随机 过 程 的 术语 来 说 , u(t,z) 是 wo(X(b) 在 假设 X(0) = z 下 的 条 件 期 望 . 
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显然 , 当知 道 了 (4.5) 式 左边 对 所 有 的 初 值 wo 的 值 时 , 就 唯一 地 确定 了 Qi. 现 
在 我 们 来 证 明 , 在 适当 的 正则 性 条 件 下 , wu 必然 满足 向 后 方程 


Ou 1 Hu ,Ou 
F307 + haz 
此 方程 推广 了 标准 扩散 方程 (4.1). 我 们 来 找 这 样 的 函数 u, 它 满足 (4.6) 且 当 t 一 0 
时 u(t,z) 一 uo(z). 当 解 是 唯一 的 时 候 , 这 个 解 必然 有 (4.5) 的 形式 ,Qt 称 为 方程 
的 格林 (Green) 函数 . 解 不 唯一 的 情形 将 在 下 一 节 中 讨论 . 
为 推导 向 后 方程 (4.6), 我 们 从 下 列 恒等式 开始 : 


(4.6) 


u(s 十 tez) 一 / Qs(z, dy)ult,y), s,t>0. (4.7) 


它 是 查 普 曼 - 科 尔 莫 戈 罗 夫 方 程 (1.3) 的 直接 推论 . 由 它 得 到 , 对 h > 0， 


E+) 0) $f onle, ule,y) -uso). (4.8) 


我 们 现在 假设 转移 概率 Q: 是 充分 正则 的 ， 以 保证 (4.5) 中 的 变换 wu 关于 z 的 一 、 
二 阶 导数 是 有 界 连 续 的 , 至 少 在 uo 是 无 穷 可 微 时 是 如 此 . 那么 根据 泰勒 公式 , 对 于 
给 定 的 e > 0 和 固定 的 ,z, 存在 5>0, 使 得 对 所 有 的 |y 一 z| < 6， 

Gulbz) _ 1 O2ult, £) 


u(t,y) — ut, 7) — (y — i zy a 一 5 < ely— zh. (4.9) 


1 Re 
对 于 这 个 6, 考虑 天。 ,Owenltt 切 -we 可 愉 及 天 guteanlett 


一 ult,z)]. 由 (4.2) 和 的 有 界 性 , 知 前 者 趋 于 0. 由 条 件 (4.3)、(4.4) 和 (4.9) 可 
以 看 出 , 对 于 充分 小 的 h, 后 者 与 (4.6) 的 右边 之 差 小 于 ea(z). 因为 是 任意 的 ， 
所 以 这 就 是 说 当 h 一 0 时 ，(4.8) 的 右边 趋 于 (4.6) 的 右边 .因此 ， 至少 右 边 导数 
Bu/8t 存在 且 由 (4.6) 给 出 . 这 个 理论 的 主要 结果 可 以 粗略 地 总 结 如 下 . 如 果 马 尔 可 
夫 过 程 的 转移 概率 满足 连续 性 条 件 (4.2)， 那 么 这 个 过 程 被 系数 b 和 a 所 确定 这 似乎 
是 理论 上 的 , 但 是 在 实际 情况 下 , 系数 b 和 a 是 事先 根据 它们 的 经 验 定义 和 过 程 的 
性 质 给 出 的 . 

为 了 说 明 b 和 a 的 意义 ， 考 虑 在 短 时 间 区 间 上 的 增 量 X(t + r) 一 X(7), 假 
设 X(r) = z. 如 果 (4.3) 和 (4.4) 中 的 矩 是 完全 的 ， 那 么 这 个 增 量 的 条 件 期 望 是 
bz)t 十 ofg 鸭 ， 它 的 条 件 方差 是 olzjt 一 刀 (z)i + oft) = a(z)t 二 ol). 因此 , b(z) 是 位 
移 的 局 部 平均 速率 的 一 种 量度 (由 对 称 性 ， 它 可 以 是 0), a(z) 是 方差 的 一 种 量度 . 
由 于 没有 更 好 的 术语 , 所 以 我 们 称 b 为 无 穷 小 速度 (或 推移 ), 称 a 为 无 穷 小 方差. 

下 例 说 明 在 具体 情况 下 确定 这 些 系数 的 方法 
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例 (a) ”布朗 运动 . 如 果 假 设 z 轴 是 均匀 和 且 对 称 的, 那么 a(z) 一 定 与 无 关 , b(z) 
一 定 等 于 0. 因此 , 我 们 有 古典 扩散 方程 (4.1). 
例 (b) 奥 因 斯 坦 - 乌 伦 别克 (Ornstein-Uhlenbeck) 过 程 是 通过 让 作 布 朗 运动 的 质 
点 受 弹力 作用 而 得 到 的 . 在 分 析 上 这 就 是 说 向 原点 的 推移 速度 与 距离 成 正比 ， 即 
Mz) = pz. 因 这 对 无 穷 小 方差 没有 影响 , 所 以 alz) 仍 是 常数 ， 比 如 说 是 1. 向 后 方 
程 的 形式 为 

aultz) 182u(tz) Oult, 7) 

HH 2 rm fOr 


幸好 这 个 方程 容易 求解 . 实际 上 , 变 基 替换 


(4.10) 


v(t, 7) = u(t, zept)， 


把 它 化 成 

Bu 1 

3 (4.11) 
进一步 的 变量 替换 
一 一， (4.12) 


把 (4.11) 变 成 标准 扩散 方程 (4.1)， 由 此 推出 , 奥 因 斯 坦 - 乌 伦 别克 过 程 的 转移 密 
度 q(T,y) 与 这 样 一 个 正 态 密度 一 致 , 它 以 Te-P! 为 中 心 且 具有 (4.12) 给 出 的 方差 7. 

在 3.8 节 例 (e) 中 已 说 明 奥 因 斯 坦 - 乌 伦 别克 过 程 被 (4.10) 所 确定 , 初始 正 态 
分 布 是 唯一 的 具有 平稳 转移 概率 的 正 态 马尔 可 夫 过 程 . [ 包括 布朗 运动 , 它 是 p= 0 
的 特殊 情形 . ] 
例 (c) 遗传 学 中 的 扩散 . 考虑 一 个 具有 不 同 代 和 固定 大 小 N 的 总 体 ，( 玉 米田 是 
一 个 典型 例子 . ) 有 2N 个 基因 , 每 个 基因 属于 两 种 基因 型 之 一 . 我 们 用 Xn 表示 4 
型 基因 的 比例 . 如 果 无 视 选 择优 势 和 突变 ,那么 可 以 把 第 (n+ 1) 代 的 基因 取 作 第 
n% 代 基因 的 大 小 为 2N 的 随机 样本 . 那么 过 程 Xn 是 马尔 可 夫 过 程 , 0< Xn < 1. 在 

“给 定 Xn = z 时 , 2NXn+t1 的 分 布 是 均值 为 2Nz、 方 差 为 2Nz(1 ~ z) 的 二 项 分 布 . 

每 一 代 的 变化 的 期 望都 是 0, 方差 与 z(1 一 z) 成 正比 . 

现在 假设 我 们 考察 很 多 的 代 并 引入 一 种 时 间 尺 度 ， 使 其 发 展 过 程 似乎 是 连续 
的 . 在 这 种 近似 下 , 我 们 讨论 的 是 这 样 一 种 马尔 可 夫 过 程 ， 它 的 转移 概率 满足 我 们 
的 基本 条 件 , 并 且 b(z) = 0,a(z) 与 z(1 一 z) 成 正比 . 比例 因子 依赖 于 时 间 尺 度 的 单 
位 , 且 可 以 正规 化 为 1. 于 是 (4.6) 化 为 如 下 的 形式 ， 


Butz) _ Ce 到 
a 


Er (4.13) 
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这 次 过 程 局 限于 有 限 区 间 0,1. 选择 和 突变 引起 了 一 个 推移 , 导致 了 有 一 个 附加 一 阶 
项 的 方程 (4.3). 结果 所 得 的 模型 在 数学 上 等 价 于 R. A. 费 希 尔 和 赖 特 (8S. Wright) 所 
研究 的 模型 ,虽然 他 们 的 论证 是 不 同 的 . 由 于 总 体 的 大 小 为 固定 的 这 一 假设 , 模型 
的 遗传 含义 有 点 模糊 ,总体 大 小 的 影响 一 般 不 被 注意 . 正确 的 叙述 9 依赖 于 一 个 有 
两 个 空间 变量 (基因 频率 和 总 体 大 小 ) 的 方程 . 
例 (d) 总体 的 增长 . 我 们 想 要 描述 一 个 大 总 体 的 增长 ， 其 中 的 个 体 是 随机 独立 
的 , 并 且 繁 殖 的 速度 不 依赖 于 总 体 的 大 小 . 对 于 很 大 的 总 体 , 这 个 过 程 可 以 近似 地 
看 成 连续 的 , 即 由 一 个 扩散 方程 所 决定 . 个 体 的 独立 性 蕴含 无 穷 小 速度 与 方差 一 定 
与 总 体 的 大 小 成 比例 . 因此 ,这 个 过 程 由 具有 a = az 和 6b = Bz 的 向 后 方程 (4.6) 
所 决定 . 常数 a 和 6 依赖 于 时 间 单 位 的 选择 和 总 体 的 大 小 , 选取 适当 的 度量 单位 ， 
可 以 使 = 1 6 = 1 -1 或 0( 依 赖 于 净 增 长 速度 ). 

在 第 1 卷 17.5 节 (5.7) 中 用 离散 模型 描述 同样 的 总 体 增长 . 给 定 X(r) =n, 假 
设 事 件 Xi+T7) =n 十 1,n 一 1 和 nn 的 概率 分 别 与 和 Ant,pnt 和 1 一 (入 +)nt 相差 一 
项 o(2)， 因 此 无 穷 小 速度 与 方差 是 (和 一 po)n 与 (A+ /0m. 只 要 取 极限 就 可 得 到 扩 
散 过 程 , 可 以 证 明 它 的 转移 概率 是 离散 模型 中 转移 概率 的 极限 . 

用 扩散 过 程 类 似 地 逼近 离散 过 程 常 党 是 有 用 的 ， 从 普通 的 随机 游 动 过 渡 到 第 
1 卷 14.6 节 中 所 述 的 扩散 过 程 提供 了 一 个 典型 的 例子 . [ 在 10.5 节 例 (a) 中 继续 讨 
论 . ] p 
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在 本 节 中 为 了 简单 起 见 , 我 们 假设 转移 概率 @: 有 一 个 由 一 随机 密度 核 g.(z,y) 
给 定 的 概率 密度 qt. 

变换 (4.5) 和 向 后 方程 (4.6) 描述 了 依赖 于 起 点 z 的 转移 概率 . 从 概率 的 观点 
来 看 , 取 起 点 z 为 一 固定 点 并 把 qe(z,y) 看 作 终点 y 的 函数 似乎 更 自然 . 从 这 个 观 
点 来 看 , 变换 (4.5) 应 换 成 


van) = /wate Wa (5.1) 


此 处 vo 是 任意 的 概率 密度 . 由 qs 的 随机 性 推出 , 对 任意 固定 的 s > 0, 变换 v 仍 是 
概率 密度 . 换 句 话说 , 虽然 变换 (4.5) 作用 于 连续 函数 上 , 但 新 的 变换 把 概率 密度 变 
成 新 的 密度 . 

在 10.4 节 中 我 们 能 用 概率 方法 证 明 变换 (4.5) 满足 向 后 方程 (4.6). 虽然 从 概 
率 的 观点 来 看 , 新 的 变换 更 为 自然 , 但 是 用 类 似 于 推导 向 后 方程 的 直接 方法 来 推导 


® W. Feller, Proc. Second Berkeley Symposium on Math. Statist. and Probability, 1951, 
Ppp.227-246. 
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南 前 方 和 是 不 可 能 的 . 然而 ,由 伴随 信 生 分 方程 的 一 般 理 论 似乎 应 有 ，( 在 充分 的 正 
则 性 条 件 下 ) 应 满足 方程 9 
re (62) 
在 概率 沦 中 这 个 方程 区 为 向 前 方程 或 相克 - 普 归 克 方 和 
在 进行 推导 之 前 ,我 们 先 举例 说 明 这 样 一 种 信息 ,从 (5.2) 推导 它 要 比 从 向 后 
方程 推导 它 容易 . 
例 (a) 总 体 的 增长 . 10.4 节 例 (d) 导出 了 向 前 方程 
Ov(59) _ Py(sY) BD) 
Os Oy? oy 
可 以 证 明 ， 对 于 给 定 的 初始 密度 w， 存在 唯一 的 一 个 解 虽然 难以 获得 显 式 解 ， 但 
是 从 这 个 方程 可 以 直接 得 到 许多 有 关 的 信息 . 例如 ,为 了 计算 平均 总 体 大 小 MX(o)， 
用 y 乘 (5.3) 式 并 关于 y 从 0 到 oo 进行 积分 . 在 左边 我 们 得 到 导数 M'(s). 利用 分 
部 积分 法 ,并 假设 在 无 穷 远 外 站 于 0 的 速度 比 1/ 六 趋 于 0 的 速度 快 ， 可 以 看 出 
有 边 等 于 BM(s). 于 是 


(5.3) 


M'(s) = BM(s), 
从 而 M(s) 与 ep 成 比例 . 类 似 的 形式 计算 表明 方差 与 2a8-1. eB*(e8s~!) 成 比例 . 
。。@ 这 里 是 对 (5.2) 的 推导 的 一 个 非 正式 的 概述 ,由 转移 概率 的 查 普 蛇 - 科 尔 莫 站 罗 夫 方程 (1.3) 扒 出 
J vu Way 
只 依赖 于 s 十 t. 因此 ， 


/wa fu Da ® 
我 们 现在 按照 向 后 方程 (4.6) 来 表示 Bu/8t， 并 对 所 得 的 积分 应 用 显然 的 分 部 积分 公式 ， 如 果 
R(s,y) 表示 (5.2) 的 左边 , 那么 我 们 断言 (*) 等 于 


f Rw wav 


加 上 一 个 只 依赖 于 u,v 及 其 在 边界 上 (或 在 无 穷 远 处 ) 的 导数 的 量 . 在 适当 的 条 件 下 , 这 些 边界 项 
可 以 忽略 不 计 , 在 这 种 情况 下 , 令 t 一 0, 取 极限 就 可 得 到 恒等式 


/ [E WD _ Re uo(y)dy = 0、 
如 果 此 式 对 任意 的 uo 都 成 立 , 那么 括号 中 的 表达 式 应 等 于 0, 即 (5.2) 一 定 成 立 . 
这 个 论证 在 大 多 数 的 实际 情况 下 是 行 得 通 的 ,因此 向 前 方程 (5.2) 一 般 是 成 立 的 . 但 是 在 所 谓 
的 回 返 过 程 中 , 被 我 们 忽略 的 边界 项 确实 起 一 定 的 作用 . 因此 ,这 种 过 程 的 转移 概率 满足 向 后 方程 
(4.6), 但 不 满足 (5.2). 在 这 种 情形 下 , 正确 的 向 前 方程 是 一 个 具有 不 同形 式 的 方程 . 
此 外 还 值得 注意 的 是 , (5.2) 是 无 意义 的 , 除 菲 a 和 5b 是 可 微 的 ,而 对 向 后 方程 却 没有 这 样 的 


限制 . 当 a 和 b 不 可 微 时 , 也 可 以 写 出 正确 的 向 前 方程 , 但 是 它 包含 10.4 节 的 第 3 个 脚注 中 提 到 
的 广义 微分 算 子 . 5 
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[ 与 离散 情形 下 的 类 似 结果 , 第 1 卷 第 17 章 的 公式 (5.10) 和 (10.9) 进行 比较 . ] 显 
然 , 这 种 计算 的 合理 性 需要 加 以 说 明 , 但 是 这 个 结果 至 少 有 一 定 的 启发 性 ， 人 
明确 地 算出 gt 就 无 法 从 向 后 方程 得 到 这 个 结果 . 

向 前 方程 和 向 后 方程 之 间 的 关系 类 似 10.3 地 于 也 过 程 的 情形 下 所 权 的 关系 
我 们 不 加 证 明 给 出 简要 的 概括 . 

在 开 区 间 而 ,523 上 考虑 向 后 方程 (4.6), 这 区 间 可 以 是 有 限 的 或 无 限 的 . 我 们 假 
设 。 > 0, 并 且 为 使 (5.2) 有 意义 ,假设 系数 和 ?是 充分 正则 的 . 在 这 些 条 件 下 ， 
存在 唯一 的 一 个 最 小 解 Qt, 使 得 (4.5) 是 向 后 方程 (4.6) 的 解 . 不 好 办 的 是 , 对 于 固 
定 的 t 和 z, 核 Qe(z,) 可 能 表示 亏损 分 布 . 在 任何 情形 下 , Qt 有 密度 ，(5.1) 的 函 
数 v 满足 向 前 方程 . 事实 上 , 在 10.3 节 所 述 的 显然 的 意义 下 ， 这 个 解 又 是 最 小 的 
在 这 个 意义 上 ,向 前 方程 是 向 后 方程 的 推论 . 但 是 , 这 些 方程 只 有 当 最 小 解 为 非 志 
损 解 时 才 唯 一 地 确定 过 程 . 在 所 有 其 他 的 情形 下 ,过程 的 性 质 被 附加 的 边界 条 件 所 
确定 . 

从 第 1 卷 第 14 章 中 讨论 的 0,c0 上 的 简单 随机 游 动 类 推 , 边界 条 件 的 性 质 很 
容易 理解 许多 约定 在 首次 到 达 原点 时 是 有 效 的 . 在 破产 问题 中 过 程 停止 ;在 这 种 
情形 下 ,， 称 原点 为 吸收 壁 . 另 一 方面 ， 当 原点 作为 反射 壁 时 ,质点 立刻 回 到 位 置 1， 
过 程 永 远 继续 下 去 . 问题 是 为 使 边界 条 件 出 现 , 当 且 仅 当 到 达 边界 点 . 由 轨道 函数 
的 连续 性 , “在 时 刻 t 前 已 到 达 过 边界 点 z2” 这 个 事件 在 扩散 过 程 中 是 完全 确定 的 . 
它 与 跳跃 过 程 中 “t 前 发 生 无 穷 多 次 跳跃 ” 这 个 事件 密切 相关 . 

在 某 些 扩散 过 程 中 ,以 概率 1 达 不 到 任 一 边界 点 . 布朗 运动 [10.4 节 例 (a)] 就 
是 这 样 的 过 程 . 于 是 最 小 解 表示 一 正常 概率 分 布 ， 且 不 存在 其 他 的 解 . 在 所 有 其 他 
的 情况 下 ， 直 到 到 达 边界 之 前 ,最 小 解决 定 过 程 . 它 对 应 于 吸收 璧 ， 即 它 描 述 了 到 
达 边 界 点 时 终止 的 过 程 . 这 是 最 重要 的 一 类 过 程 , 不 仅 是 因为 所 有 其 他 的 过 程 都 是 
它 的 推广 , 而 且 更 因为 所 有 的 首次 通过 的 概率 都 可 以 利用 人 为 的 吸收 壁 来 计算 . 这 
个 方法 一 般 是 可 行 的, 但 我 们 将 用 最 简单 的 例子 来 说 明 . ( 它 实际 上 已 暗中 被 利用 
于 随机 游 动 和 别 的 地 方 , 例如 在 第 1 卷 17.10 节 的 习题 18 中 . ) 

在 下 例 中 我 们 把 注意 力 局 限于 简单 的 方程 (5.4). 更 一 般 的 扩散 方程 将 在 14.5 
节 中 用 拉 普 拉 斯 变换 的 方法 来 处 理 . 

例 (b) ”一 个 吸收 壁 . 首次 通过 时 间 . 考虑 而 60 上 的 一 个 在 原点 上 有 一 吸收 壁 的 布 
朗 运动 . 更 确切 地 说 , 在 时 刻 0 从 点 z > 0 出 发 的 布朗 运动 在 首次 到 达 原 点 的 时 刻 
停止, 由 对 称 性 ,向 后 方程 和 向 前 方程 都 旦 古典 扩散 方程 的 形式 
Cl (5 
ot 28z2 “ 
与 在 随机 游 动 的 情形 一 样 , 适当 的 边界 条 件 是 对 所 有 的 t,q:(0,y) = 0. (这 个 断言 既 
可 由 第 1 卷 14.6 节 中 的 取 极 限 的 办 法 证 明 , 也 可 由 解 的 最 小 性 来 证 明 . ) 


300 第 10 章 马尔 可 夫 过 程 与 半 群 


对 于 给 定 的 uo， 我们 来 求 (5.4) 的 这 样 一 个 解 ， 它 对 上 > 0,z > 0 有 定义 , 且 
使 得 w(0,z) = wo(z),u(t,0) = 0. 它 的 构造 依赖 于 应 归功 于 开尔文 (Lord Kelvin) 的 
映像 法 . 我们 借助 于 wo(-z) = -ao(z) 把 uo 延 拓 到 左 半 直 线 , 并 在 =55;55 上 对 
这 个 初始 条 件 解 (5.4). 由 对 称 性 , 这 个 解 满足 条 件 u(t,0) = 0, 再 把 z 局 限于 0,00 
上 , 我 们 就 得 到 所 要 求 的 解 . 它 由 wo(y)g(z,3) 在 0 co 上 的 积分 给 出 , 其 中 


we()-()]65 


因此 , qt 表示 我 们 这 个 过 程 的 转移 密度 (t > 0,z > 0,y > 0). 容易 看 出 , 对 于 固定 的 
qt 是 (5.4) 的 一 个 满足 边界 条 件 ge(0,y) = 0 的 解 . [关于 更 系统 的 推导 见 14.5 节 
例 (a). ] 

对 2 积分 , 我 们 得 到 在 时 刻 上 的 总 概率 质量 


/ glz,W)dy = 2N(z/VD) — 1, (5.6) 


其 中 名 表示 标准 正 态 分 布 . 换 句 话说 ，(5.6) 是 从 z > 0 出 发 的 轨道 在 时 剂 t 前 不 到 达 
原点 的 概率 , 在 这 种 意义 上 ，(5.6) 表示 一 自由 布朗 运动 中 的 首次 通过 时 间 的 分 布 . 
注意 , (5.6) 可 以 看 作 是 微分 方程 (5.4) 的 解 ， 此 解 定义 在 = > 0 上 , 满足 初始 条 件 
w(0,z) = 1 和 边界 条 件 u(t,0) = 0. 

[在 (5.6) 中 我 们 看 出 了 指数 为 a = 3 的 稳定 分 布 ， 在 6.2 节 中 通过 随机 游 动 
取 极 限 得 到 过 同样 的 结果 . ] 
例 (c) 两 个 吸收 壁 . 现在 考虑 受到 两 个 在 0 和 a > 0 点 的 吸收 蕊 阻碍 的 布朗 运动 . 
这 就 是 说 , 对 于 固定 的 0 < y < a, 转移 密度 qt 应 满足 微分 方程 (5.4) 和 边界 条 件 
gt(0,y) = g(a,y) = 0. 

容易 验证 此 解 为 ? 


se 高 三 人 (时 营区) )} 


(5.7) 
其 中 0 < z,y < a. 实际 上 , 此 级 数 显然 收敛 , 项 的 明显 的 相互 抵消 说 明 对 于 所 有 的 
t>0 和 0<y<a,q(0,y) = qr(a,y) = 0. [(5.7) 的 拉 普 拉 斯 变换 将 在 14.5 节 (5.17) 
中 给 出 . ] 


@ 关于 适用 于 差分 方程 的 同一 方法 ， 见 第 1 卷 14.9 节 中 的 习题 15 ~ 习题 18. 

@ 此 构造 依 束 于 利用 重复 反射 的 逐次 逼近 ,在 (5.5) 中 我 们 有 满足 0 点 的 边界 条 件 但 不 满足 a 点 的 
边界 条 件 的 解 . 在 a 点 的 反射 导致 一 个 满足 a 点 的 边界 条 件 但 不 满足 0 的 边界 条 件 的 由 4 项 组 成 
的 解 . 在 0 和 a 点 交 普 反射 并 取 极限 可 得 (5.7)， 随 机 游 动 的 类 似 解 已 在 第 1 卷 14.9 节 (9.1) 中 
给 出 , (5.7) 可 以 通过 它 利用 第 1 卷 14.6 节 所 述 取 极 限 的 方法 推导 出 来 . 
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在 0<y<a 上 积分 (5.7), 我 们 得 到 具有 下 列 形式 的 在 时 刻 + 的 总 概率 质量 ， 


re 过 fn(2e3 -2) -oz 2) 


m + mt)}. 


—N 


(Pte) (5.8) 


这 是 从 f 出 发 的 质点 在 时 齐 t 前 未 被 吸收 的 概率 . 
函数 Xe 是 扩散 方程 (5.4) 的 解 , 当 t 一 0 时 它 趋 于 1 且 满足 边界 条 件 和 a(t,0) = 
Xalt,a) = 0. 也 可 以 借助 于 传 里 叶 级 数 的 方法 得 到 这 个 解 的 下 列 形式 ®: 


4 之 1 (2n+UD2r2 \、 ，(2n +1)rz 
和 人 可) 一 zm iee( 2a2 ) I a 4 


(5.9) 


于 是 我 们 得 到 了 同一 函数 Xe 的 2 个 完全 不 同 的 表达 式 @， 这 是 很 幸运 的 ， 因 为 
(5.8) 中 的 级 数 只 有 当 t 较 小 的 时 候 才 收敛 , 而 (5.9) 却 对 较 大 的 上 适用 . 
为 了 给 出 Xa 的 另 一 种 解释 , 考虑 一 个 从 原点 出 发 的 布朗 运动 中 的 一 质点 的 

置 X(0). 我 们 说 , 在 时 间 区 间 BE 内 , 质点 运 留 在 -72,675 内 , 相当 于 说 , 在 十 30 
上 有 吸收 壁 且 从 0 出 发 的 过 程 在 时 刻 t 前 不 发 生 吸 收 . 因此 ,Xo (6 Bo) 等 于 在 众 原 
点 出 发 的 自由 布朗 运动 中 ,“|X(s)| < 了 对 所 有 的 0 < 8 < 者 成立” 这 个 事件 的 概 
率 ， 
例 (d) 在 极限 定理 和 科 尔 莫 威 罗 夫 - 斯 米尔 诺 夫 检验 中 的 应 用 . 设 五 ,她 ,，… 是 
独立 同 分 布 的 随机 变量 , 并 设 E(Y) = 0,E(Y?) = 1. 设 Sn = 五 十 … 十 5 = 
maxllSi|…,|Sn|]， 由 中 心 极限 定理 ， 似 乎 应 有 ;Ti 的 渐 近 性 质 几乎 与 瑟 是 正 
态 变量 的 情形 一 样 ， 在 后 一 情形 中 ， 正 规 化 了 的 和 式 Sk/V 与 在 时 刻 k/n(k = 
0 1… 到 的 布 并 运动 的 变节 差不多 大 小 相同 .已 经 知道 ,此 布朗 运 动 停留 在 区 间 
(- io 和) 中 的 概率 等 于 Ne(15o)、 因此 , 我 们 的 似乎 有 道理 的 论证 导致 了 下 列 
猜想 : 当 一 co 时， 

P{T, < z} 一 L(z), (5.10) 
其 中 工 (z) = XA2:(1,z) 从 (5.8) 和 (5. 9) 得 出 ， 


@ ”随机 洲 动 的 类 似 公式 已 在 第 1 卷 14.5 中 导出 ,但 在 那里 , 边界 条 件 是 和 a(t,0) = 1 和 Xalt,a) = 0. 

@ (5.8) 和 (5.9) 之 间 的 恒 等 可 作为 泊 松 求 和 公式 的 标准 例子 [ 见 19.5 节 (5.10)]. 它 有 重要 的 历史 意 
义 ,因为 它 最 初 是 在 9 函数 变换 的 雅 可 比 理论 中 被 发 现 的 . 见 Satz 277 in 已 Landau, Verteilung 
der Primzahien, 1909. 
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L(z)=2 mr - R((4k — 1)z)} 


(ED (2n 十 1)2r2 
一 元 人 2n+1° xp(— 8322 ) 


这 个 猜想 于 1946 年 为 龙泉 多 斯 (P. Erd6s) 和 M. Kac 证 明 , 是 基本 概念 后 来 
被 称 作 不 变性 原理 . 粗略 地 讲 , 它 说 明 随机 变 基 的 某 些 函 数 的 渐 近 分 布 对 这 些 变量 
分 布 的 变化 是 不 敏感 的 , 可 以 通过 考虑 适当 的 近似 随机 过 程 来 求 得 渐 近 分 布 . 这 个 
方法 为 M. Donsker、P. Billingsley、Yu. V. Prohorov 等 人 了 予以 完善 , 成 了 证 明 极限 
定理 的 一 个 强 有 力 的 工具 、 

由 于 类 似 的 理由 , 分 布 (5.11) 在 关于 1.12 节 中 所 讨论 的 那 种 类 型 的 非 参数 检 
验 的 大 量 文献 中 , 也 起 了 显著 的 作用 .9 
例 (e) ”反射 壁 . 与 普通 随机 游 动 类 似 , 我 们 用 边界 条 件 a) 让 = 0 来 定义 在 原 
点 上 的 反射 壁 ， 因 为 原点 的 反射 壁 的 作用 与 随机 游 动 的 情形 类 似 . 容易 验证 ， 区 间 
0,06 上 的 解 由 把 减 号 换 成 加 号 的 (5.5) 式 给 出 . 除了 设 uo( 一 z) = wo(z) 以 外 , 利用 
映像 法 的 形式 推导 是 相同 的 . 对 于 0,a, 在 0 和 a 两 点 有 反射 壁 的 解 可 以 类 似 地 在 
(5.7) 中 把 减 号 换 成 加 号 得 到 . (用 健 里 叶 展 开 式 或 泊 松 求 和 公式 得 到 的 另 一 表达 式 
将 在 19.9 节 的 习题 11 中 给 出 . ) 

应 当 指 出 , 在 反射 壁 的 情形 下 , 4 是 正常 概率 密度 . > 


10.6 高 维 扩散 


容易 把 上 述 理论 推广 到 二 维 的 情形 . 为 了 避免 麻烦 的 下 标 , 我 们 用 (Y(t),Y(t)) 
表示 坐标 变量 , 用 qe(z,y;€,7) 表示 转移 密度 . 这 里 z,y 是 起 点 ,qt 是 以 (&,7) 为 自 
变量 的 密度 . 假设 与 10.4 节 中 的 一 样 ， 只 是 现在 无 穷 小 速度 b(z) 是 一 向 量 , 方差 
a(z) 是 协 方差 矩阵 . 代替 (4.6)， eh 


(5.11) 


Ou Ou 
KB 2 + om + 名 + 四， (6.1) 


其 中 系数 依赖 于 = 和 y. 在 二 维 布朗 运动 的 情形 ， me 经 过 正 

规 化 , 我 们 应 有 a 
和 

党 -站 中 + 吧 |. (62) 

@ 这 个 课题 是 比较 新 的 , 但 是 作为 起 点 的 恒等式 (5.11) 看 来 已 经 废 而 不 用 了 . [A. Renyi，On the 
distribution function L(z). Selected Translations in Math. Statist. and Probability, vol. 

4(1963) pp. 219-224. Renyi 的 新 证 明 依 六 于 涉及 9 函数 的 古典 论证 , 因而 冲淡 了 (5.11) 的 简单 

的 概率 意义 . ] 
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相应 的 转移 密度 是 正 态 的 ， 其 方差 为 i， 中 心 在 (z,y) 上 . 此 密度 的 明显 的 因子 分 
解 , 说 明 X(t) 和 Y(t) 是 随机 独立 的 

这 个 过 程 中 最 有 趣 的 变量 是 到 原点 的 距离 R(2)(R? = X? 十 Y?)， 直观 上 很 明 
显 , R(t) 是 一 个 一 维 扩散 过 程 的 变量 , 比较 一 下 求 这 个 过 程 的 扩散 方程 的 各 种 方法 
是 很 有 趣 的 . 在 极 坐标 下 ，(6.2) 的 正 态 转移 密度 呈 形 式 


_ P+r? ~ 2preos(0 — 9) (6.3) 


p 

六 ep( 加 
(其 中 z = rcosa, 等 等 ). 如 果 给 定时 刻 0 的 位 置 7,a, 则 R(t) 的 边缘 密度 可 通过 
(6.3) 式 对 9 积分 得 出 . 参数 a 消失 , 我 们 得 到 过 程 R(t) 的 转移 密度 为 ? 


wtp) = Jop( -He) (2), (6 


其 中 jo 是 2.7 节 (7.1) 中 定义 的 贝 塞 尔 函数 . 这 里 > 表示 时 刻 0 时 的 初始 位 置 . 由 
这 个 推导 易 见 ,对 于 固定 的 p, 转移 概率 w 满足 极 坐标 下 的 (6.2), 即 
Ow 1/0w 1 
党 -计生 + 党 )， (E9 
这 就 是 过 程 R(t) 的 向 后 方程 . 只 要 要 求 有 旋转 对 称 性 就 可 由 (6.2) 得 到 它 ， 
方程 (6.5) 说 明 过 程 R(t) 的 无 穷 小 速度 是 1/(2r). 如 果 我 们 考虑 从 z 轴 上 的 点 
7 出 发 的 平面 布朗 运动 , 那么 存在 一 个 远离 原点 的 推移 是 不 难 理解 的 . 由 对 称 性 , 在 
时 刻 h > 0, 它 的 模 坐 标 > r 或 < > 的 概率 相同 . 在 第 1 种 情形 下 一 定 有 R(h) > 7， 
但 在 第 2 种 情形 下 这 个 关系 式 也 可 能 成 立 . 因此 , 关系 式 R(h) > r 的 概率 > 诗 学 
均 说 来 一 定 是 增加 的 . 
转移 概率 的 同样 推导 适用 于 三 维 的 情形 , 但 有 一 个 本 质 的 简化 ，(6.3) 中 雅 可 
比 行列 式 p 现在 应 换 成 p2sing, 且 可 以 利用 初等 积分 法 . 代替 (6.4), 我 们 得 到 三 维 
中 的 过 程 R(t) 的 转移 密度 


ant(mp) = A | -人 a 一 exp( = 拉 )| (6.6) 


(r 仍 表示 在 时 刻 0 的 初始 位 置 . ) 


10.7 从 属 过 程 


如 果 引 入 一 个 所 谓 的 随机 化 了 的 操作 时 间 ,那么 可 以 从 具有 平稳 转移 概率 Qi (z， 
卫 ) 的 马尔 可 夫 过 程 {X(t)} 导出 各 种 新 的 过 程 . 假定 对 每 个 t+ > 0, 存在 一 个 随机 变 
@ 这 个 积分 是 大 家 所 热 知 的 . 为 了 验证 , 把 eee? 展 成 cos9 的 等 级 数 . 
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量 了 (b， 它 的 分 布 为 VA. 那么 可 以 由 下 式 定义 一 个 新 的 随机 核 有 
Ren) = 三 oemmtas (71) 


这 表示 X(T(t)) 在 给 定义 (0) = 0 下 的 分 布 . 
例 (a) 如果 T(b) 服从 期 望 为 at 的 泊 松 分 布 , 则 


Plz,T)= De ot T). (7.2) 


这 些 玉 是 一 个 伪 泊 松 过 程 的 转移 概率 . 在 10.9 节 中 将 证 明 , 利用 泊 松 分 布 的 随机 
化 导致 一 个 所 谓 的 指数 公式 ， 此 公式 是 马尔 可 夫 半 群 理论 的 基础 . 我 们 将 会 看 到 ， 
对 其 他 一 些 分 布 也 可 得 出 类 似 的 结果 ， 每 个 这 种 分 布 都 导致 一 个 与 指数 公式 类 似 
的 公式 . 

变量 X(T(t)) 构成 一 个 新 的 随机 过 程 ， 它 不 一 定 是 马尔 可 夫 过 程 . 为 使 此 过 程 
是 马尔 可 夫 过 程 , 显然 , P 必须 满足 查 普 曼 - 科 尔 莫 碟 罗 夫 方程 


Prat)= 记忆 ea (7.3) 


这 就 是 说 , X(T(t+ 3)) 的 分 布 是 利用 忆 (y, 卫 ) 对 X(T(s)) 的 分 布 进行 积分 得 到 的 ， 
因此 根据 条 件 概率 的 定义 ， 


Ply,T) = P{X(T(t+ 8) € TIX(T(s)) =Y). (7.4) 


高 阶 转移 概率 的 类 似 计 算 表 明 ,，(7.3) 足以 保证 导出 过 程 {X(T(t))} 的 马尔 可 夫 性 . 

我 们 现在 想 要 求 出 导致 (7.3) 的 解 PB 的 分 布 Ui. 直接 处 理 这 个 问题 将 会 遇 到 
许多 困难 ， 但 是 这 些 困难 可 以 通过 首先 考虑 如 下 的 简单 的 特殊 情形 而 避免 ,变量 
T(t) 的 所 有 值 都 是 一 固定 数 h > 0 的 倍数 . 关于 T(t) 的 分 布 , 我们 记 


P{T(D) = nh} = on 人 (75) 


如 果 给 定 X(0) =z, 那么 X(T() 的 分 布 为 
RD = 入 woulcm 08) 
k=0 
因为 核 {Q4} 满足 查 普 昌 - 科 尔 葛 划 罗 夫 方程， 所 以 我 们 有 


+eo 
PPeanpe@D= 开 ua.gepnG 站 (77) 
局 > 
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可 以 看 出 , 核 PB 满足 查 普 曼 - 科 尔 莫 戈 罗 夫 方程 (7.3) 的 充 要 条 件 是 对 所 有 的 s > 0 
和 +> 0， 
ao(s)an(t) + ai(t)an-1(t) + +** + an(s)ao(t) = an(s + t). (7.8) 
如 果 {T(t)} 是 一 个 平稳 独立 增 量 过 程 ， 那 么 上 述 关 系 式 成 立 ,， (7.8) 的 最 一 般 的 解 
已 在 第 1 卷 12.2 节 中 求 出 . 
这 个 结果 导致 如 下 的 猜想 ; 一 般 说 来 ,只 要 T(t) 是 一 平稳 独立 增 量 过 程 的 变 
量 , 即 只 要 分 布 Ui 满足 9 


Vert®) = {Te -Woey), (79) 


则 (7.3) 成 立 . 我 们 用 取 极 限 的 办 法 来 验证 这 个 猜想 . 9 我 们 把 Ui 表示 为 刚才 所 述 
的 那 种 类 型 的 算术 分 布 序 列 的 极限 : UL” 集中 于 数 ju 的 倍数 上 ， 它 对 点 nh, 赋 
于 的 质量 满足 形 如 (7.8) 的 关系 式 . 于 是 对 每 个 v 我 们 得 到 一 个 相应 于 (7.6) 的 核 
PL"), 它 满足 查 普 曼 - 科 尔 莫 总 罗 夫 方程 (7.3), 因此 , 为 证 (7.1) 的 核 也 满足 查 
普 遇 - 科 尔 莫 戈 罗 夫 方程 (7.3)， 只 需 证 明 PL) 一 叫 , 或 者 等 价 地 ， 对 每 个 在 无 穷 
远 处 等 于 0 的 连续 函数 f, 都 有 


+o0 +o0 
人 Pl (z,dy) f(y) 一 人 Pi(z, dy) f(y). (7.10) 
如 果 我 们 设 ee 
Fa= 人 Qe dw), (1D 
那么 (7.10) 可 以 写成 形式 
人/ Flatfaj — / ~ F(s,2)Us{ds}. (7.12) 
0 0 


如 果 下 是 连续 的 , 那么 这 个 关系 式 一 定 成 立 , 这 只 对 Qt 附加 了 一 个 极端 微弱 的 正 
则 性 条 件 . 因此 , 我 们 证 明了 下 列 基本 结果 . 

设 {人 X()} 是 一 个 具有 连续 的 转移 概率 Qs 的 马尔 可 夫 过 程 ，{T(t)} 是 一 个 具有 非 
负 独 立 增 量 的 过 程 . 那么 {X(T(t))} 是 一 个 具有 由 (7.7) 给 出 的 转移 概率 及 的 马尔 可 
夫 过 程 . 称 这 个 过 程 为 通过 操作 时 间 T(t) 而 从 属于 {X(b)} 的 过 程 9. 过 程 {T(t)} 称 
为 有 向 过 程 . 

@ (7.9) 的 最 一 般 的 解 将 在 13.7 节 中 用 拉 普 拉 斯 变换 的 方法 给 出 ， 也 可 以 用 无 穷 可 分 分 布 的 一 般 理 

论 : 
@ 共有“ 的 分 我 们 的 方法 再 次 说 明 朴素 的 方法 有 时 是 很 有 力 的 . 
@ 从 属 半 群 的 概念 是 S. Bochner 在 1949 年 引入 的 . 关于 一 种 较 高 级 的 系统 方法 , 见 EE. Nelson, A 


functional calculus using singular Laplace integrals, Trans. Amer. Math. Soc., 88(1958), 
pp. 400-413. 
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当 XX() 也 是 独立 增 量 过 程 时 ， 就 会 出 现 一 种 非常 有 趣 的 特殊 情形 . 在 这 种 情 
形 下 , 转移 概率 只 依赖 于 差 卫 -- z, 并 且 可 以 换 成 等 价 的 分 布 函 数 . 于 是 (7.7) 星 更 
简单 的 形式 


Ro) = 三 oj (713) 
我 们 所 有 例子 都 是 这 种 关 型 的 


例 (b) 柯 西 过 程 是 一 个 从 属于 布衣 运动 的 过 程 . 设 {X(t)} 是 转移 密度 为 qi(z) = 
(2nt) 玉 .6 3?/t 的 布朗 运动 ( 维 纳 过 程 ), 我 们 取 {了 (人)} 为 具有 指数 了 和 转移 密度 


t pe 3t2/z 


“97 yava 
的 稳定 过 程 . 那么 分 布 (7.13) 的 密度 为 
Ra = 去 eee/ = st (7.14) 
A 7 x(t) 


因此 我 们 的 从 属 化 导致 了 柯 西 过 程 . 

这 个 结果 可 以 用 两 个 独立 的 布朗 运动 X(t) 和 Y(t) 解释 如 下 . 

在 6.2 节 例 (e) 中 , 曾 证 明了 可 以 把 Ui 解释 为 过 程 Y(s) 首次 取得 值 t > 0 的 
时 刻 的 等 待 时 间 的 分 布 . 因此 , 考虑 过 程 X 在 Y(s) 首 次 取得 值 的 时 刻 T(t) 上 的 值 就 
可 以 得 到 柯 西 过 程 2(t). [关于 柯 西 过 程 与 布朗 运动 的 首 中 时 间 的 另 一 种 联系 ， 见 
6.2 节 例 (f)-] 
例 (c) ”稳定 过 程 . 容易 把 上 例 推广 到 指数 分 别 为 a 和 6 的 任意 的 严格 稳定 过 程 
{X(} 和 {T(t)}. 这 里 a < 2, 但 是 因为 T(t) 应 当 是 正 的 , 所 以 我 们 必然 有 B < 1. 
转移 概率 Qs 和 U6 具有 形式 Qi(z) = Q(zt-Ve) 和 Ue(z) = U(zt-1B), 其 中 和 
UV 是 固定 的 稳定 分 布 . 我 们 来 证 明 从 属 过 程 X(T(t)) 是 指数 为 aB 的 稳定 过 程 . 这 个 
断言 等 价 于 关系 式 Pt(z) = (Zz-198). 由 Qs。 和 Ui 的 给 定形 式 来 看 , 这 个 关系 式 
显然 可 通过 代 换 s = yA1/8 从 (7.13) 推出 . 

[我 们 的 结果 本 质 上 等 价 于 6.2 节 例 (h) 所 导出 的 乘积 公式 . 当 X(t) > 0 时 ， 
这 个 公式 可 以 用 拉 普 拉 斯 变换 的 术语 来 重新 叙述 , 如 13.7 节 例 (e) 中 那样 . 关于 傅 
里 叶 形 式 见 16.12 节 中 的 习题 9] 
例 (d) ”和 由 馈 玛 过 程 定向 的 复合 泊 松 过 程 . 设 Qt 是 概率 分 布 F 产生 的 复合 泊 松 分 
布 , 并 设 Ut 有 T 密度 ez:"1/T(z). 于 是 (7.13) 呈 如 下 的 形式 ， 


P= Sanldr™*, (7.15) 


n=0 
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其 中 


BR ee ce TE an HH 
“m0=/ eA TO nr re (7.16) 


容易 验证 概率 an(t) 具有 无 穷 可 分 的 母 函数 污 an(t)C" = (2 一 一 - 
例 (e) ”由 泊 松 过 程 定向 的 伽 玛 过 程 . 我 们 现在 考虑 与 例 (d) 中 相同 的 分 布 , 但 它 
们 的 作用 却 正好 相反 . 那么 操作 时 间 是 整 值 的 , 0 点 的 质量 为 e“. 由 此 推出 结果 所 
得 的 分 布 在 原点 有 质量 为 e- 的 原子 . 连续 部 分 的 密度 为 


pe _。 mnr1 tr 2 
> [ei = Env (7.17) 
其 中 五 是 2.7 节 (7.1) 中 的 贝 塞 尔 函 数 . 由 此 推出 此 分 布 是 无 穷 可 分 的 , 但 直接 验 
证 是 不 容易 的 . > 


10.8 ”马尔 可 夫 过 程 与 半 群 


第 8 章 揭示 了 把 概率 分 布 作为 连续 函数 的 算 子 来 处 理 的 好 处 ,用 算 子 方法 讨 
论 随 机 核 好 处 更 大 ， 半 群 理论 导致 了 用 其 他 方法 无 法 得 到 的 马尔 可 夫 过 程 的 统一 
理论 . 给 定 R' 上 的 一 个 随机 核 K 和 一 个 有 界 连续 函数 u, 关系 式 


DG = 三 ”eanug， 人 


定义 了 一 个 新 函数 . 不 失 一 般 性 , 可 设 变换 U 也 是 连续 的 . 我 们 可 以 利用 在 连续 函 
数 空间 中 的 导出 变换 4 一 U 来 研究 核 K 的 性 质 . 有 两 个 主要 的 理由 促使 我 们 考虑 
更 一 般 的 体系 . 首先 , 形 如 (8.1) 的 变换 在 任意 的 空间 中 是 有 意义 的 , 讨论 一 个 不 包 
含 最 简单 和 最 重要 的 特殊 情形 ( 即 具有 可 数 状态 空间 的 过 程 , 这 时 (8.1) 化 成 矩阵 变 
换 ) 的 理论 是 极 不 经 济 的 . 其 次 , 即使 在 局 限于 直线 上 的 连续 函数 空间 的 理论 中 , 各 
种 类 型 的 边界 条 件 也 迫使 我 们 引进 特殊 种 类 的 连续 函数 , 另 一 方面 , 不 用 多 大 力气 
就 可 以 得 到 更 广泛 的 理论 . 如 果 读 者 愿意 的 话 , 可 以 不 顾 一 般 性 , 而 把 所 有 的 定理 
归于 下 列 典型 情况 之 一 (或 几 种 情形 ). (i) 基本 空间 铺 是 实 直 线 , .2 是 在 无 穷 远 处 
等 于 0 的 有 界 连续 函数 所 成 的 类 . (i) 空间 卫 是 Ri 或 R? 中 的 有 限 闭 区 间 也 乡 是 
T 上 的 连续 函数 所 成 的 类 . (ii) 由 整数 组 成 , -2 由 有 界 序列 组 成 . 在 这 种 情形 下 ， 
最 好 把 序列 看 成 列 向 量 , 变换 看 作 和 矩阵 . 

和 在 第 8 章 中 一 样 , 把 有 界 实 函 数 的 范 数 定义 为 |lul| = suplu(z)|. 为 使 函数 
序列 {un} 一 致 收敛 于 wu, 当 且 仅 当 |lun 一 ul| 一 0. 

今后 镍 将 表示 某 集 合 号 上 的 具有 下 列 性 质 的 实 函 数 类 : (i) 如 果 ui 和 2 属于 
学 , 那么 每 个 线性 组 合 ciui + cauz e 儿 . (ii) 如 果 un € 名 上 且 |lun 一 dll 一 0, 那么 
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WE 名 . (十 ) 如 果 wue 乡 , 那么 w+ 和 ww 也 属于 名 (其 中 尺 = ut 一 w ,ut 是 4 的 
正 部 , u- 是 尺 的 负 部 ). 换 句 话说 , .2 在 线性 组 合 一 致 极限 和 绝对 值 运算 下 是 封闭 
的 . 前 两 个 性 质 使 2 成 为 一 个 巴 拿 赫 空间 ,后 一 个 性 质 使 儿 成 为 格 

下 列 定义 是 标准 的 : 一 个 线性 变换 了 是 纪 上 的 一 个 自 同 态 ,如果 每 个 ve . 乡 
有 一 个 像 Tue 乡 , 使 得 上 Tul| < mllull, 其 中 mm 是 一 个 与 4 无 关 的 常数 . 具有 这 个 
性 质 的 最 小 常数 称 为 T 的 范 数 |IT|. 称 变换 7 是正 的 , 如 果 4>0 北 含 Tu>0. 
在 这 种 情形 下 , -Tu- < Tu < Tut. 收缩 算 子 是 一 个 满足 |Iz|| < 1 的 正 算 子 . 如 果 
常 值 函数 1 属于 儿 , 了 是 满足 T1 = 1 的 正 算 子 , 那么 称 了 为 推移 算 子 . ( 它 显然 是 
一 个 收缩 算 子 . ) 

给 定 多 上 2 个 自 同 态 5S 和 了 T, 它们 的 来 积 ST 是 把 4 映 成 S(Tu) 的 自 同 态 . 
显然 , ||STI| < SI. 一 般 说 来 , ST 关 TS, 这 与 8.3 节 中 的 彼此 可 交换 的 特殊 
的 卷 积 算 子 不 同 . 

我 们 只 对 形 如 (8.1) 的 变换 感 兴趣 , 其 中 K 是 随机 核 或 至 少 是 次 随机 核 . 这 种 
形式 的 算 子 是 收缩 算 子 或 推移 算 子 , 它们 还 具有 : 
单调 收敛 性 如果 un > 0 且 un Tu(un 和 tu 都 在 22 中 )， 那么 Tun 一 Tu( 处 处 收 伍 ). 

在 几乎 所 有 的 情况 下 , 具有 这 种 性 质 的 收缩 算 子 都 具有 (8.1) 的 形式 . 下 面 的 

两 个 例子 将 说 明 这 一 点 . 
例 (a) 令 了 表示 实 直线 ，2= C 表示 了 上 所 有 有 界 连续 函数 所 成 的 类 、 令 
Co C 名 是 在 士 w% 上 等 于 0 的 有 界 连续 函数 所 成 的 子 类 . 如 果 了 是 -2 上 的 收缩 算 
子 , 那么 对 于 u《 Co, Tu 在 固定 点 z 上 的 值 Tu(z) 是 多 上 的 正 线性 泛 函 . 由 里 斯 
表现 定理 ,存在 一 个 可 能 为 亏损 的 概率 分 布 F, 使 Tu(z) 是 4 关于 F 的 期 望 . 因 
为 下 依赖 于 z， 所 以 我 们 把 F(T) 记 为 K(z, 卫 ). 于 是 对 uw & Go， 


Tu- 三” Kudnugy) (82) 


当 了 具有 单调 收敛 性 时 , 这 个 关系 式 显然 可 推广 到 所 有 的 有 界 连续 函数 上 . 

对 于 固定 的 z, 作为 了 的 函数 , 核 K 是 一 个 测度 . 如 果 本 是 一 个 开 区 间 , {wn} 
是 这 样 一 列 递增 的 连续 函数 , 使 得 当 z ET 时 un(z) > 1, 当 z TT 时 un(z) 一 0， 
那么 由 积分 的 基本 性 质 ,，K(z, 了 ) = lim Tun(z). 因为 Tun 是 连续 的 ,所 以 对 固定 
的 T, 核 K 是 z 的 贝尔 函数 , 因此 K 具有 随机 核 或 次 随机 核 所 要 求 的 一 切 性 质 . 
当 把 直线 换 为 区 间或 R" 时 也 有 类 似 的 情况 . 
例 (b) 令 三 是 整数 集 , -2 是 有 界 数列 v = {zn} 组 成 的 集合 且 |lu|| = suplzn|. 
如 果 pi 表示 一 个 随机 或 次 随机 和 矩阵 ,那么 我 们 定义 这 样 一 个 变换 T, 使 得 Tw 的 
第 ;个 分 量 为 . 

(Tu); = pakuk- (8.3) 


10.8 马尔 可 夫 过 程 与 半 群 ”309 


显然 了 是 一 个 满足 单调 收 伍 性 的 收缩 算 子 ;如 果 上 面 的 矩阵 是 严格 随机 的 ， 那 么 
了 是 一 个 推移 算 子 . a 
这 些 例 子 是 典型 的 , 实际 上 很 难 找到 不 是 由 随机 核 导出 的 收缩 算 于 . 不 管 怎样 
我 们 有 理由 对 收缩 算 于 的 一 般 理论 进行 讨论 , 而且 确信 它 在 概率 中 的 重要 问题 上 
的 应 用 是 显然 的 (事实 上 我 们 决 不 超出 这 些 例子 的 范围 ) 
马尔 可 夫 过 程 的 转移 概率 构成 一 个 单 参 数 的 核 族 ， 它 满足 查 普 曼 - 科 尔 莫 姜 
罗 夫 方程 
QH 站 = Qalay)Qrly, 7) (8.4) 
(s > 0,t > 0)， 积 分 区 域 是 基本 空间 ”每 一 个 核 导出 一 个 由 下 式 定义 的 推移 算 子 
db)， 
ot0us) = /ouc euly). (8.5) 
那么 (8.4) 显然 等 价 于 
Q(s+t) = Q(s)Q(t), s>0, t>0. (8.6) 


具有 这 种 性 质 的 同 态 族 是 半 群 . 显然 , 宫 (s)Q(t) = Q(t)Q(s), 即 半 群 的 元 素 是 彼此 
可 交换 的 . 

称 .2 上 的 自 同 态 Th 的 序列 收敛 于 @ 自 同 态 T, 当 且 仅 当 对 每 个 Le .2, Tw 一 Tul| 
一 0. 在 这 种 情形 下 ,我 们 记 Th 一 工 . 

今后 我 们 集中 力 基 研究 收缩 算 子 半 群 , 并 对 它们 附加 一 个 正则 性 条 件 . 仍 用 1 表 
示人 恒 等 算 子 ，lzu = 必 
定义 ”收缩 算 子 中 (四 组 成 的 半 群 称 为 连续 的 @ ,如 果 中 (0) = 1 且 当 九 -， 0+ 时 所 (有 一 
1 


如 果 0<t < 妇 , 那么 我 们 有 
l(t) — Qull < NO -tu — ul. (8.7) 


对 于 连续 半 群 ， 存 在 这 样 的 5 > 0, 使 得 当 太一 < 6 时 ， 上 式 右 边 小 于 <. 因此 ， 
不 但 当 上 一 如 时 包 ( 一 写 (to), 而 且 (8.7) 说 明 , 对 于 每 个 固定 的 u, Q(t)u 是 
@ 这 种 形式 的 收敛 已 在 8.3 节 中 引入 过 , 称 为 强 收敛. 它 不 草 售 ||T， 一 了 || 一 0( 这 种 类 型 的 收 敏 称 为 
一 致 收 系 )， 可 以 按 下 列 方式 定义 较 弱 的 收 化 ,对 于 每 个 rz, Tnu(z) 一 Tu(z), 但 不 一 定 是 一 致 收 
敛 . 见 8.10 节 中 的 习题 6. 
@ 我 们 利用 这 个 词 作为 标准 术语 “在 原点 强 连 续 " 的 缩写 
@ 存在 这 样 的 半 群 , 使 得 只 (h) 趋 于 算 子 工头 1, 但 它们 是 病态 的 . 例如 , 把 自 同 态 T 定义 为 
Tu(z) = 了 of 十 cosz] 十 Su 1— cosz), 
并 对 所 有 的 上 > 0, 设 名 (t) = 工 . 
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的 一 致 连续 函数 . 

当然 变换 (8.1) 和 (4.5) 相同 , 都 可 作为 推导 扩散 过 程 的 向 后 方程 的 起 点 . 一 族 
马尔 可 夫 转移 概率 也 可 导出 这 样 一 个 测度 变换 半 群 , 使 得 测度 /变换 成 测度 了 (tb)/， 
后 者 对 集合 卫 赋 也 质量 


TOMD = f raryQ(e, T). (8.8) 


当 Qt 有 密度 核 4 时 , 这 个 变换 和 (5.1) 一 样 , 也 被 用 于 向 前 方程 中 . 因为 概率 
论 主要 关心 的 是 测度 而 不 是 函数 , 所 以 就 会 有 这 样 一 个 问题 : 为 什么 我 们 不 从 半 群 
{T(D} 而 从 Q(t) 出 发 ? 答案 是 有 趣 的 , 它 有 助 于 阐明 向 后 方程 与 向 前 方程 之 间 的 
复杂 关系 . 

理由 是 (正如 上 例 所 表明 的 那样 ), 对 于 普通 的 体系 ,函数 空间 -2 中 的 连续 的 
收缩 算 子 半 和 群 来 自 于 转移 概率 : 研究 我 们 的 半 群 Q(t) 实际 上 和 研究 马尔 可 夫 转 移 
概率 是 一 样 的 . 这 对 测度 半 群 是 不 正确 的 . 在 分 析 上 存在 这 样 的 十 分 合理 的 收缩 半 
群 , 它 不 是 由 马尔 可 夫 过 程 导出 的 . 例如 , 考虑 直线 上 的 任 一 形 如 (8.8) 的 马尔 可 夫 
半 群 ， 只 假设 绝对 连续 的 上 被 变 成 绝对 连续 的 T(t)y| 例如 , 令 T(t) 是 与 方差 为 t 
的 正 态 分 布 的 卷 积 ]. 如 果 /= pe 十 Us, 其 中 pe 是 上 的 绝对 连续 部 分 ,js 是 4 的 
奇异 部 分 , 那么 我 们 按 如 下 方式 定义 一 个 新 的 半 群 {S(t)}: 


S(t)p = T(t)pe + ps. (8.9) 


这 个 半 群 是 连续 的 , S(0) = 1, 但 是 不 难看 出 , 它 与 任何 一 个 转移 概率 系统 都 无 关 ， 
而 且 它 在 概率 上 是 无 意义 的 . 


10.9 “ 半 群 理论 的 “指数 公式 ” 


10.1 节 的 伪 泊 松 过 程 是 最 简单 的 马尔 可 夫 过 程 , 现在 我 们 来 证 明 , 所 有 的 马尔 
可 夫 过 程 实际 上 都 是 伪 泊 松 过 程 的 极限 形式 . ?这 个 定理 的 抽象 形式 在 半 群 理论 中 
起 着 十 分 重要 的 作用 , 我 们 现在 来 证 明 它 实际 上 是 大 数 定律 的 推论 . 

如 果 工 是 由 随机 核 K 导出 的 算 子 , 则 由 伪 泊 松 分 布 (1.2) 诱导 的 算 子 Q(t) 呈 
形式 


Q(t) = 立 CT， (9.1) 
n=0 于 


这 个 级 数 定义 为 部 分 和 的 极限 . 根据 查 普 曼 - 科 尔 莫 戈 罗 夫 方程 (1.3),， 这 些 算 子 构 
成 一 个 半 群 . 但 最 好 是 重新 开始 并 对 任意 的 收缩 算 子 T 证 明 这 个 断言 . 
@ 在 第 9 章 中 曾 讨论 过 心 (t) 是 卷 积 算 子 这 一 特殊 情形 - 
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定理 1 如 果 T 是 .上 的 收缩 算 子 , 那么 形 如 (9.1) 的 算 子 构成 一 个 连续 的 收缩 半 群 . 
如 果 T 是 推移 算 子 ， 那么 问 ( 和 j 也 是 推移 算 子 . 
证 显然 Q(t) 是 正 的 , 且 IDG < eret+etllrll < 1. 由 名 (s) 和 Q(t) 的 级 数 的 形 
式 乘积 容易 验证 半 群 性 ( 见 10.1 节 的 第 2 个 脚注 ). 由 (9.1), 关系 式 吕 (h) 一 1 是 显 
然 的 > 

我 们 把 (9.1) 缩写 为 

Q(t) =eT-Y). (9.2) 

具有 这 种 形式 的 收缩 算 子 半 群 称 为 伪 泊 松 半 群 O ,并 且 { 名 (t)} 是 由 a(T 一 1) 产 生 的 . 

现在 来 考虑 任意 一 个 由 收缩 算 子 (t) 组 成 的 连续 半 群 . 在 许多 方面 它 和 实 值 
连续 函数 有 类 似 的 性 质 , 第 7 章 所 叙述 的 、 利 用 大 数 定律 的 逼近 理论 可 以 不 经 重大 
改变 地 搬 过 来 . 特别 是 我 们 将 说 明 , 7.1 节 例 (b) 的 方法 可 以 导致 一 般 半 群 理论 的 
一 个 重要 公式 . 

对 于 固定 的 h > 0, 我 们 定义 算 子 


on() = D> HE onp), (9.3) 
n=0 
可 以 把 它们 看 作 是 通过 把 Q(t) 中 的 参数 t 随机 化 得 到 的 算 子 、 与 (9.1) 相 比较 可 以 
看 出 ,Qn(t) 构成 一 个 由 [ 吕 (h) 一 J/h 产生 的 伪 泊 松 半 群 . 现在 我 们 来 证 明 
Dalt) = QW, t—0. (94) 


因为 这 个 结果 非常 重要 ,所 以 我 们 把 它 叙 述 为 

定理 2 每 个 由 收缩 算 子 忠 (b) 构 成 的 连续 半 群 都 是 由 自 同 态 h-![OQ(h)-]] 产生 的 的 
泊 松 半 群 {Qn(t)} 的 极限 (9.4). 

证 出 发 点 是 恒等式 


antbu- Qu= eh EY lon) — Q(t)ul. (9.5) 
n=0 a 


选取 这 样 的 5, 使 得 对 于 0 < s < lla(sjv 一 sl < 6. 于 是 由 (8.7) 我 们 有 
Ian)u ~ Qull <e, hnh -dl< 8 (9.6) 
(9.5) 中 出 现 的 泊 松 分 布 的 期 思 与 方差 均 为 t/h. 利用 切 比 雪夫 不 等 式 估计 满足 nh 
引 > 5 的 诸 项 的 和 ,我 们 得 到 
IQa(u — Qull < e+ 2llullthe?. 


@ 存在 形 如 etS 的 收缩 算 子 半 群 ,其 中 S 不 是 形 如 a(T - 1) 的 自 间 态 . 如 果 a(z) 是 有 界 的 , 那么 
与 10.3 节 跳 跃 过 程 的 解 相 联 系 的 半 群 就 是 这 样 的 半 群 . 
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由 此 推出 (9.4) 在 有 限 的 t 区 间 中 一 致 地 成 立 . p 


用 其 他 的 无 穷 可 分 分 布 代替 泊 松 分 布 可 以 得 到 本 节 的 等 价 变形 . 由 第 1 着 12.2 节 我 们 
知道 , 集中 于 整数 n > 0 上 的 无 穷 可 分 分 布 {un(t)} 的 母 函数 具有 形式 


Punt)6" = exp(talp(O) — 1), (9.7) 
5 


其 中 
p(O=po+PC+…，m>0，2pi=1. (9.8) 


假设 分 布 {un(t)} 的 期 望 为 此 有 限 方差 为 ct. 在 (9.3) 中 把 泊 松 分 布 换 成 {un(t/5)}, 我们 
得 到 算 子 


ntt = Tun (而 Jamm = Dun (起) Qn(h). (9.9) 


和 上 述 证 明 中 一 样 , 应 用 大 数 定律 可 以 证 明 当 h 一 0 时 闪 h(t) 一 名 (t) . 这 样 , 我 们 得 到 了 
另外 一 个 “指数 公式 "其 中 {un(s)} 起 着 泊 松 分 布 的 作用 . 

为 了 看 清 这 个 论证 的 概率 内 容 和 可 能 的 推广 , 用 X(t) 表示 半 群 为 { 〇 (b)} 的 马尔 可 夫 
过 程 的 变量 ,用 T(t) 表示 具有 服从 fun(t)} 的 独立 增 基 过 程 的 变量 . 算 子 (9.9) 相应 于 变量 
x( 好 (看 )) 的 转移 概率 . 换 句 话说 , 我 们 引进 了 一 个 特殊 的 从 属 过 程 ; 由 了 过程 的 大 数 
定律 似乎 应 有 ， 当 h 0 时 ,新 过 程 的 分 布 趋 于 原来 的 马尔 可 夫 过 程 的 分 布 . 这 种 带 近 方 
法 决 不 是 只 对 整 值 变量 T(t) 有 效 . 实际 上 , 我 们 可 以 把 {T(t)} 取 为 任 一 使 得 B(Z(b)) = 中 
且 方差 存在 的 具有 正 独立 增 量 的 过 程 . 

因此 , 给 定 的 马尔 可 夫 过 程 {X (9 作为 变量 为 X( A7 ( 起 ) ) 的 从 属 马尔 可 夫 过 各 的 
极限 出 现 . 

重要 的 是 肖 近 半 群 的 构造 可 能 比 原来 的 半 群 的 构造 简单 得 多 . 事实 上 ,，(9.9) 的 牌子 Dn(b) 构 
成 的 半 群 是 简单 的 擅 泊 松 型 半 群 . 为 了 看 清 这 一 点 , 今 


Q# =pla)= 和 mon 和 = 并 pa， (910) 


456 
这 是 推移 算 子 的 混合 , 从 而 它 本 身 是 一 个 推移 算 子 . 于 是 比较 (9.7) 和 (9.9) 可 得 , 在 形式 上 
Qnlt) = ep 六 (D* -1), (9.11) 


它 确 实 具 有 (9.2) 的 形式 . 不 难 用 初等 方法 来 证 实 (9.11), 但 是 我 们 将 会 看 出 , 它 实际 上 是 
从 属 半 群 的 生成 元 公式 的 特殊 情形 ( 见 13.9 节 例 (b)). 


@ 这 是 由 钟 开 莱 指 出 的 ( 见 7.5 节 ). 
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10.10 ”生成 元 , 向 后 方程 


考 虚 由 算 子 = a(T 一 1) 产生 的 伪 泊 松 型 的 收缩 半 群 {Q(t)}. 这 个 算 子 是 自 
同 态 , 所 以 lu =v 对 所 有 的 ue .多 有 定义 , 并 且 
2 1, w 天 一 0 十 . (10.1) 
如 果 这 对 所 有 的 半 群 都 成 立 , 那 就 太 好 了 , 但 这 一 般 是 不 成 立 的 . 例如 ,对 与 布朗 
运动 相 联系 的 半 群 ， 扩散 方程 (4.1) 蕴含 对 于 二 次 连续 可 微 的 u,(10.1) 的 左边 趋 于 
也 但 是 当 不 可 微 时 , 极限 不 存在 . 然而 扩散 方程 仍 唯一 地 确定 了 这 个 过 程 , 因 
为 半 群 由 它 对 二 次 连续 可 徽 函数 的 作用 所 决定 . 因此 , 我 们 不 应 该 希望 (10.1) 对 所 
有 的 函数 4 成 立 ， 但 是 为 了 一 切实 际 的 目的 ， 只 要 它 对 于 充分 多 的 函数 成 立 就 行 
了 . 考虑 这 一 点 , 我 们 引入 
定义 ”如 果 对 于 乡 中 的 菜 些 元 素 tu， 关 系 式 (10.1) 成 立 (在 一 致 收敛 的 意义 下 )， 那 
么 我 们 设 v = Llu. 这 样 定义 的 算 子 称 为 半 群 {Q(t)} 的 生成 元。 
Q(t) 习 (10.1), 我 们 看 出 它 覃 含 
Qt+ 久 -50 = Q(t)v. (10.2) 
因此 , 如 果 th 存在 , 那么 所 有 函数 Q(t)u 都 在 乌 的 定义 域内 , 并 且 
2+) -20, = Ot)iu = YQ(t)u. (10.3) 
从 本 质 上 讲 , 这 个 关系 式 和 马尔 可 夫 过 程 的 向 后 方程 是 一 样 的 . 事实 上 , 沿用 10.4 
节 的 记号 , 我 们 应 令 
ult, 7) = Q(t)uo(z), 
其 中 uo 是 初始 函数 . 那么 (10.3) 变 为 
a = u(t, 2). (10.4) 
这 是 熟知 的 向 后 方程 , 但 应 当 正 确 地 解释 它 . 10.4 节 中 扩散 过 程 的 转移 概率 非常 光 
滑 , 对 于 所 有 的 初始 连续 函数 wo， 向 后 方程 都 是 满足 的 . 一 般 来 说 却 未 必 如 此 . 
例 (a) 平移 . 令 儿 由 直线 上 的 在 无 穷 远 处 等 于 0 的 连续 函数 组 成 , 设 (i)u(z) = 
xu(z 十 如 显然 ,为 使 (10.1) 成 立 , 当 且 仅 当 的 导数 w 连续 且 在 无 穷 远 处 等 于 0. 
在 这 种 情形 下 ,ll = 也 


@ 第 9 章 对 卷 积 半 群 的 讨论 ， 局 限于 考虑 无 穷 可 微 的 函数 ， 因 而 所 有 的 生成 元 都 定义 在 同一 区 域 上 . 
对 于 一 般 的 半 群 ,没有 这 样 方便 的 方法 可 用 . 
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在 形式 上 向 后 方程 (10.4) 可 化 为 
Bu _ Bu 
or 
当 t= 0 时, 化 为 给 定 的 初始 函数 uo 的 形式 解 为 ul(t,z) = wo = (+ z). 但 这 只 有 
当 uo 是 可 微 的 时 候 才 成 立 . 
例 (b) 与 在 10.2 节 中 一 样 , 考虑 变量 为 X(t) 的 伪 泊 松 过 程 和 另 一 个 由 X#(t) = 
X(t) -ct 所 定义 的 过 程 . 相应 的 半 群 有 一 个 明显 的 关系 , 即 全 #(t)u 在 z 点 的 值 等 
名 (tj)u 在 z+ct 上 的 值 . 对 于 生成 元 来 说 , 这 意味 着 


(10.5) 


d 
# 二 让 一 cgs’ (10.6) 
因此 4# 的 定义 域 局 限于 可 微 函 数 . 当初 始 函 数 uo 有 连续 的 导数 时 ， 向 后 方程 是 
满足 的 , 但 对 任意 的 函数 不 一 定 是 满足 的 . 特别 , 转移 概率 本 身 不 一 定 满足 向 后 方 
程 . 这 说 明了 旧式 理论 的 困难 [ 曾 在 9.2 节 (2.14) 中 讨论 过 ] A 
入 不 自然 的 正则 性 条 件 来 推导 向 前 方程 . 

生成 元 这 个 概念 的 用 途 应 归功 于 下 列 事实 : 对 于 年 个 由 收编 算 于 构 记 的 和 
半 群 ,生成 元 唯一 地 决定 半 群 . 这 个 定理 的 简单 证 明 将 在 13.9 节 中 给 出 . 

这 个 定理 使 我 们 能 够 在 没有 不 必要 的 限制 下 讨论 向 后 方程 并 大 大 简化 它们 的 
推导 . 因此 , 当 我 们 事实 上 不 知道 生成 元 确实 存在 的 情况 下 , 就 无 法 导出 10.4 节 第 
3 个 脚注 所 提 到 的 扩散 算 子 的 最 一 般 形 式 . 


第 11 章 更 新 理论 


更 新 过 程 是 在 6.6 节 中 引入 的 并 在 6.7 节 中 举例 说 明 过 . 我 们 现在 从 所 谓 的 更 
新 方程 的 一 般 理论 开始 , 更 新 方程 经 常 出 现在 许多 领域 中 . 11.8 节 的 极限 定理 为 一 
般 更 新 定理 的 适用 性 提供 了 一 个 极 好 的 例子 . 11.6 节 和 11.7 节 包 含 某 些 渐 近 估计 
的 改进 和 推广 形式 , 这 些 估计 原来 是 用 高 深 的 分 析 方法 很 费力 地 推导 出 来 的 . 这 说 
明 利用 一 般 的 理论 来 解 一 些 特殊 的 难题 是 很 经 济 的 . 关于 用 拉 普 拉 斯 变换 的 方法 处 
理 更 新 问题 ， 见 14.1 节 ~14.3 节 . 

许多 文献 讨论 怎样 在 更 新 定理 中 去 掉 变量 为 正 这 一 条 件 , 为 解决 这 个 难题 , 已 
花费 了 不 少 的 精力 . 鉴于 这 个 令 人 难忘 的 历史 , 11.9 节 将 包括 更 新 定理 的 一 个 新 的 
大 大 简化 了 的 证 明 . 


11.1 更 新 定理 


令 所 是 一 个 集中 于 ?0,00 上 的 分 布 , 即 我 们 设 FF(0) = 0. 我 们 不 要 求 期 望 存 
在 , 但 由 假设 的 正 性 , 我 们 可 以 记 


n=/ rtaw = 人 -Poly (1 
其 中 < oo. 当 p=o0 时 ,我们 约定 把 符号 1-! 看 作 0. 
本 节 我 们 研究 函数 _ 
局 = 》 Fnw (1.2) 
n=0 


在 z 一 oo 时 的 渐 近 性 质 . 不 久 就 可 看 到 这 个 问题 和 下 列 更 新 方程 的 解 2 的 渐 近 性 
质 有 密切 的 关系 : 


2Z(z) = z(z)+ 人 Z(z—WF{dy}, z>0. (1.3) 


为 确定 起 见 , 我 们 认为 积分 区 间 是 闲 的 , 但 现在 我 们 认为 z 和 2 在 负 半 轴 上 为 0， 
于 是 积分 限 可 以 换 成 -oo 和 oo, 更 新 方程 可 以 写成 卷 积 方程 的 形式 


Z=z 十 下 太 2. (1.4) 
@ 如 果 我 们 容许 在 原点 上 :有 一 个 质量 为 p < 1 的 原子 , 那么 不 会 发 生 本 质 上 的 变化 . (见习 题 1. ) 
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(类 似 的 说 明 适 用 于 以 后 所 有 的 卷 积 . ) 

在 6.6 节 和 6.7 节 中 曾 相 当 详 细 地 讨论 了 U 的 概率 意义 和 更 新 方程 的 概率 应 
用 . 因此 , 现在 我 们 将 从 纯 分 析 的 角度 进行 讨论 . 但 是 应 记 住 ,在 更 新 过 程 中 U(z) 
等 于 0,z 中 更 新 时 刻 的 平均 个 数 , 原点 也 当 作 一 个 更 新 时 刻 . 因此 可 以 把 U 看 成 是 
集中 于 0,00 上 的 测度 , 区 间 工 = a, 的 质量 是 U{7} = U(6b) - D(a). 原点 是 一 个 单 
位 质量 的 原子 , 此 质量 是 由 级 数 (1.2) 中 第 0 项 赋予 的 . 

下 列 引 理 只 是 重新 叙述 一 下 6.6 节 的 定理 1, 但 为 使 本 节 自 给 自足 , 我们 给 出 
了 一 个 新 的 证 明 . 
引 理 ”对 于 所 有 的 x,U(z) < oo. 如 果 z 是 有 界 的 ， 那么 由 


2(7)= 三 z(z—YU{dy}, z>0, (1.5) 


所 定义 的 函数 2 是 更 新 方程 (1.3) 的 唯一 的 在 有 限 区 间 上 有 界 的 解 . 

[利用 当 z < 0 时 z(z) = Z(z) = 0 这 一 约定 , 我 们 可 以 把 (1.5) 写成 2 = Uz 
的 形式 .] 
证 设 Un= FO* 十 … 十 F" 坟 ,选择 这 样 的 正 数 7+ 和 ,使 1 一 F(7) > .于 是 


[re-wute = 1 Pd), 2>0, (186) 


因此 nlUn(z) - Un(z 一 7)] < 1. 令 n 一 00, 我 们 可 得 , 对 于 长 度 < 7 的 每 个 区 间 
I,U{ 了 } < m1. 因为 长 度 为 a 的 任 一 区 间 至 多 是 1 + a/7 个 长 度 为 + 的 区 间 的 并 ， 
所 以 

U(z) —U(z — a) < C,, (1.7) 


2 Ca = (a 十 7)/(7n). 因此 ,对 于 所 有 具有 给 定 长 度 的 区 间 I,U{T} 是 一 致 有 界 


三 Un 六 z 满足 Zn+1 = z 十 F 友 zn. 令 n 一 co, 我 们 看 出 (1.5) 中 的 积分 是 有 
i 并 且 Z 是 (1.3) 的 解 . 
为 了 证 明 它 的 唯一 性 , 注意 两 个 解 之 差 满足 V = FV, 因此 , 对 了 = 1,2,…， 
也 有 


V(z)= 三 V(z—yF"*{dy}, z>0. (1.8) 
但 是 当 7 一 oo FE"*(z) 一 oo, 且 因为 假设 V 在 古 z 中 是 有 界 的 ， Wh 
2>0Y(z) 一 


和 中 了 玫 、 入 \ 的 信 数 上 的 分 布 所 起 的 特殊 作用 妨碍 了 对 更 新 定理 的 系统 六 六 
照 5.2 节 的 定义 3, 这 样 的 分 布 称 为 算术 分 布 , 使 集中 于 和 ,2 和 ,… 上 的 最 大 的 入 
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称 为 F 的 步 长 , 在 这 种 情形 下 , 测度 U 是 纯 原 子 的 ， 我 们 用 ww 表示 nA 的 质量 . 
第 1 卷 13.1 节 中 的 更 新 定理 说 明 wu 一 和 /4. 下 列 定理 9 把 这 个 结果 推广 到 了 集中 
于 页 55 上 的 任意 分 布 . 为 了 完整 起 见 , 重新 叙述 了 算术 分 布 的 情形 . (注意 , 如 
果 几 = co, 则 就 约定 -1 =0. ) 

更 新 定理 (第 一 形式 ). 如 果 严 不 是 算术 分 布 ， 那 么 对 于 每 个 六 > 0， 


TU 一 Ut- 月 一 由 to0. (1.9) 


如 果 正 是 算术 分 布 ， 那 么 当 j 是 步 长 的 倍数 时 ， 上 式 也 成 立 . 

在 证 明 这 个 定理 之 前 , 我 们 利用 更 新 方程 的 解 (1.5) 的 渐 近 性 质 来 重新 叙述 它 . 
因为 可 以 把 给 定 的 函数 z 分 解 为 它 的 正 部 和 负 部 ,所 以 我 们 可 以 假设 z > 0. 为 了 
确定 起 见 , 我 们 首先 假设 下 不 是 算术 分 布 , 且 期 望 4 < oo. 

如 果 对 于 0< a < z <b< oo,z(z) =1, 对 于 z 的 其 他 值 ,，z(z) =0, 则 我 们 从 
(1.5) 得 到 

Z(t)=U(t—0) Ut-b) = (ba)/h, 上 一 oo. (1.10) 


这 个 结果 可 立即 推广 到 有 限 阶梯 函数 : 令 五 ，……, 五 是 正 半 轴 上 的 长 度 为 L1,…, Lr 
的 不 相交 的 区 间 , 如 果 z 在 I 取 值 ok, 在 I 的 并 集 之 外 等 于 0, 那么 显然 


Z(t) — pp-! bp ak 一 Al 广 z(z)dz. (1.11) 
k=1 9 


由 于 古典 的 黎 曼 积分 是 通过 有 限 的 逼近 阶梯 函数 来 定义 的 , 因此 似乎 应 有 : 当 > 是 
黎 曼 可 积 函数 时 , 极限 关系 式 (1.11) 成 立 . 为 了 弄 清 这 个 问题 , 我们 回忆 一 下 z 在 
有 限 区间 0 < z < a 上 的 黎 曼 积 分 的 定义 . 只 要 考虑 把 这 个 区 间 分 成 有 相同 的 长 度 
= a/n 的 子 区 间 的 分 划 就 行 了 . 令 zk 和 元 分 别 是 满足 下 式 的 最 大 数 和 最 小 数 ， 


mk < 2(7) < Tp, (k— Dh<gz< kh. (1.12) 


应 当 记 住 ms 和 元: 对 h 的 明显 的 依赖 性 . 对 于 给 定 的 步 长 h， 下 歼 受 和 与 上 丈 受 
和 定义 为 


g = him T= hm. (1.13) 


@ P. 厄 尔 多 斯 (Erd5s)、W. 费 勒 和 波 拉 德 (HH. Pollard) 在 1949 年 证 明了 离散 的 情形 . 他 们 的 证 
明 立 刻 被 布莱克 韦 尔 (P. Blackwell) 推广 了 . 现在 的 证 明 是 新 的 . 关于 向 不 集中 于 00 上 的 分 布 
的 推广 见 11.9 节 . 向 另 一 个 方向 的 意义 深远 的 推广 包含 于 Y. S. Chow and H. E. Robbins, A 
renewal theorem for random variables which are dependent or non-identically distributed. 
Ann. Math. Statist., vol. 34(1963) pp. 390-401. 
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当 六 一 0 时 5 和 7 都 趋 于 有 限 的 极限 . 如 果 5 一 gc 一 0, 那么 这 两 个 极限 是 相同 
的 , 就 用 这 个 共同 的 极限 来 定义 z 的 黎 曼 积分 . 每 个 除了 跳跃 点 以 外 都 连续 的 有 界 
函数 在 这 个 意义 上 都 是 可 积 的 、 

当 积分 在 而 06 上 进行 时 , 古典 的 定义 引进 了 可 以 避免 的 复杂 化 . 为 了 使 可 积 
函数 类 尽 可 能 广泛 ,照例 把 耐 o0 上 的 积分 定义 为 在 而 a 上 的 积分 的 极限 . 为 使 非 
负 连 续 函 数 z 在 这 种 意义 下 是 可 积 的 ， 当 且 仅 当 它 的 图 形 与 z 轴 之 间 的 面积 是 有 
限 的 ,遗憾 的 是 这 并 没有 排除 z(z) 的 实际 振动 以 及 当 z 一 oo 时 z(z) 为 oo 的 可 
能 性 . ( 见 例 a) 如 果 给 定 的 函数 z 剧烈 地 振动 , 那么 解 2 将 趋 于 有 限 极限 这 个 假设 
是 不 合理 的 . 换 句 话 说 , 复杂 的 标准 定义 使 很 多 函数 成 为 可 积 的 . 为 了 我 们 的 目的 ， 
最 好 用 原先 的 定义 推广 到 无 穷 区 间 这 样 自然 的 方式 进行 讨论 ， 因 没有 既定 的 术语 ， 
我 们 称 之 为 直接 积分 ,以 表示 它 与 通过 有 限 区 间 取 极限 的 间接 办 法 有 所 不 同 . 
定义 “函数 z > 0 称 为 直接 黎 曼 可 积 的 ， 如果 在 (1.12)~(1.13) 中 定义 的 上 、 下 歼 曼 和 
是 有 限 的 , 且 当 h 一 0 时 趋 于 同一 极限 . 

这 个 定义 对 有 限 区 间 与 无 限 区 间 不 加 区 别 . 容易 看 出 , 如 果 z 在 每 个 有 限 区 间 
贡 a 上 是 可 积 的 ， 并 且 对 某 个 h,5 < co, 那么 z 在 而 56 上 是 直接 可 积 的 . (于 是 对 
所 有 的 h, 自然 有 二 < oo. ) 正 是 这 个 性 质 排除 了 剧烈 振动 的 可 能 性 

我 们 可 以 用 逼近 阶梯 函数 来 重新 叙述 这 个 定义 ,对 于 固定 的 h > 0, 当 (k 一 
Dh < z < kh 时 , 设 区 (z) = 1, 否则 设 zx(z) =0. 那么 


Z= Pmkzk, 2= DkZk (1.14) 


是 两 个 有 限 阶 梯 函 数 , 且 z < z < z. z 的 积分 是 当 h 一 0 时 这 些 阶梯 函数 的 积分 的 
共同 极限 . 用 Zi 表示 对 应 于 zi 的 更 新 方程 的 解 . 那么 对 应 于 z 和 的 解 为 


2Z= DZkmk， 万 = LI. (1.15) 


由 更 新 定理 , 对 每 个 固定 的 上 有 Zk(z) 一 h/ 此 外 , (1.7) 保证 对 于 所 有 的 上 和 
有 Zk(z) < Ch. 因此 ,(1.15) 中 级 数 的 余部 一 致 地 趋 于 0, 从 而 我 们 有 


Zz) 一 an， Za 一 zj 一 oo). (1.16) 


但 是 2Z< 2 < 2, 从 而 Z(z) 的 所 有 极限 值 都 位 于 g/p 和 55/p 之 间 . 如 果 z 是 直接 
黎 曙 可 积 的 ,那么 二 
Ze) = p71 人/ z(g)dy， 工 一 oo. (1.17) 


迄今 我 们 假设 下 是 非 算术 分 布 的 , 且 pj < oo. 当 p= oo 时 ,只 要 把 上 看 作 
0, 这 个 论证 可 以 照搬 过 来 . 
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如 果 下 是 步 长 为 和 的 算术 分 布 , 那么 (1.5) 的 解 2 具有 形式 
2Z(7) = Lz(z — kA ux, (1.18) 
其 中 wx 一 MA. 我 们 容易 看 出 , 对 于 固定 的 r， 


Zrz+nA) 一 XI》 zz +i 和 AN, nm o0, (1.19) 
j=1 

只 要 上 述 级 数 收敛 ; 如 果 z 是 直接 可 积 的 , 那么 上 述 级 数 必 然 收敛 . 

我 们 已 从 更 新 定理 推导 出 了 (1.17) 和 (1.19), 但 这 些 关系 式 包含 更 新 定理 作为 
它们 的 当 z 是 区 间 0, 有 的 示 性 函数 时 的 特殊 情形 . 因此 , 我 们 证 明了 如 下 的 
更 新 定理 ( 另 一 形式 ). @ 如 果 z 是 直接 柳 曼 可 积 的 ,那么 更 新 方程 的 解 Z 当 下 是 非 
算术 分 布 时 满足 (1.17)， 当 F 是 步 长 为 的 算术 分 布 时 满足 (1.19). 

人 们 也 许 会 问 : 是 否 至 少 对 于 在 无 穷 远 处 趋 于 0 的 连续 函数 z, 可 以 去 掉 直 接 
可 积 性 这 一 条 件 呢 ? 下 面 的 例子 说 明 不 能 这 样 做 . 10.3 节 例 (b) 将 类 似 地 说 明 更 新 
定理 对 无 界 函 数 z 可 以 不 成 立 , 即使 z 在 有 限 区 间 外 等 于 0 也 不 行 . 因此 在 更 新 理 
论 中 不 能 应 用 非 正 常 的 黎 曼 积分 , 直接 可 积 性 是 更 新 理论 的 自然 基础 . 
例 (a) ”连续 函数 z 在 0,00 上 可 能 是 无 界 的 ,但 是 在 0,00 上 是 柳 曼 可 积 的 . 为 了 说 
明 这 一 点 ,对 n= 1,2,…, 令 z(n) = an, 并 在 诸如 lz 一 | < hs < 3 的 区 间 的 并 
集 外 令 z 便 等 于 0; 在 n 和 n 土 hn 之 间 设 z 是 线性 函数 . 那么 z 的 图 形 由 面积 为 
anhn 的 三 角形 序列 组 成 ,从 而 z 为 黎 曼 可 积 的 充 要 条 件 是 Zanjhn < co, 这 并 不 排 
除 an 一 oo 的 可 能 性 . 
例 (b) ”为 了 研究 直接 可 积 性 在 更 新 定理 中 的 作用 ,只 要 考虑 算术 分 布 就 够 了 . 
因此 , 我 们 可 以 假设 测度 U 集中 在 整数 上 , 点 n 的 质量 wn 趋 于 极限 py-! > 0. 因 
此 , 对 任 一 正 整数 n, 我 们 有 


Z(n) = unz(0) + un-1z(1) + + woz(n). 


现在 就 取 z 为 上 例 中 的 满足 on = 1 的 函数 , 那么 Z(n) ~ np-!, 因此 2 不 是 有 界 

的 . 如 果 an 充分 缓慢 地 趋 于 0, 那么 这 显然 也 是 正确 的 , 因此 我 们 得 到 这 样 一 个 连 

续 可 积 函 数 z 的 例子 , 使 得 z(z) 一 0, 但 Z(z) 却 不 是 有 界 的 . p 

@ 我 们 希望 这 种 形式 与 上 述 讨论 能 结束 文献 中 流行 的 可 斐 的 混乱 . 最 广泛 利用 的 参考 文献 是 下 面 这 篇 

报告 ，W. L. Smith, Renewal theory and its ramifications, J. Roy，Stat，Soc，(Series B), 

vol，20 (1958) pp. 243-302. 它 出 现 后 ,Smith 的 “主要 更 新 定理 ”实际 上 代 状 了 过 去 的 一 切 形 

式 (它们 并 不 总 是 正确 的 ). 这 个 主要 定理 在 z 是 单调 的 这 个 不 必要 的 假设 下 证 明了 (1.17). 史 密 

斯 (Smith)1954 年 的 证 明 是 以 维 纳 的 高 深 的 陶 伯 (Tauberian) 定理 为 基础 的 ， 1958 年 的 报告 给 人 

以 这 样 的 印象 , 即 这 个 曲折 的 程序 比 直接 化 为 更 新 定理 的 第 一 形式 更 为 简单 , 并 且 在 这 个 报告 中 无 
意 地 丢掉 了 z 为 有 界 这 个 条 件 .[ 关于 它 的 必要 性 见 10.3 节 例 (b). ] 
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11.2 ”更 新 定理 的 证 明 


对 于 算术 分 布 FF, 更 新 定理 已 在 第 1 卷 13.11 节 中 证 明 过 了 , 因此 我 们 假设 下 
是 非 算术 分 布 . 为 给 出 证 明 , 我 们 需要 两 个 引 理 . (第 1 个 引 理 将 以 更 强 的 形式 出 现 
在 10.9 节 的 系 中 . ) 
引 理 1 设 ( 是 这 样 一 个 有 界 的 一 致 连续 函数 ,使 得 对 于 -co < 并 < co,5(z) < 5(0). 
如 果 


(= /seyray), (1) 


那么 C(x) = <(0). 
证 ”如果 取 与 下 的 卷 积 , 则 由 (2.1) 利用 归纳 法 可 得 


= cee -12 (22) 


被 积 函数 < (0)， 因 此 当 对 于 Fr* 的 每 个 增 点 y 都 有 C(-y) = 〈(0) 时 , (2.2) 在 
z= 0 点 才 可 能 成 立 . 根据 5.4 节 的 引 理 2， 上 述 的 增 点 所 成 的 集合 2 在 无 穷 远 处 
是 稠密 的 . 鉴于 〈 的 一 致 连续 性 , 这 蕴含 当 y 一 co 时 5(-g) 一 5(0). 当 r 一 co 时 
Fr* 的 质量 趋 于 集中 在 co 上 . 因此 , 对 于 较 大 的 7, (2.2) 中 的 积分 本 质 上 只 依赖 y 
的 较 大 的 值 . 对 于 这 样 的 值 , 4(z 一 y) 接近 于 4(0). 因此 , 令 7 一 co, 我 们 从 (2.2) 
推出 4(z) = 4(0), 这 就 是 我 们 要 证 明 的 . p 
引 理 2 设 z 是 在 0, 有 外 等 于 0 的 连续 函数 . 相应 的 更 新 方程 的 解 Z2 是 一 致 连 续 的 ， 
并 且 对 于 每 个 a， 
Zrz+da) 一 2Zz) 一 0，z 一 oo. (2.3) 

证 在 一 个 长 度 为 h+25 的 区 间 外 , 差 z(z + 5) - z(z) 等 于 0, 因此 由 (1.5) 和 
(1.7), 

|Z(z+6)— 2Z(z)| < Ch+2smax|z(z + 6) — z(z)|. (2.4) 
这 说 明 , 如 果 z 是 一 致 连续 的 , 那么 2 也 是 一 致 连续 的 . 

现在 假设 2 有 连续 的 导数 z, 那么 z 存在 且 满 足 更 新 方程 


0 =20)+ [ Ze -rey. (2.5) 
因此 ,2' 是 有 界 且 一 臻 连续 的 . 令 


lim sup2'(z) = 7, (2.6) 
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并 选择 这 样 的 序列 , 使 Z'(t,) 一 7. 由 
Ga(z) = 2'(tn+7) (2.7) 


定义 的 函数 族 6, 是 等 度 连续 的 , 并且 
T+E 
GO to = ole. (2.8) 


从 而 存在 一 个 这 样 的 子 序列 , 使 得 Gnr 收敛 于 一 个 极限 6. 由 (2.8) 推 知 这 个 极限 
满足 引 理 1 的 条 件 , 因此 对 于 所 有 的 ,6'(z) = 6(0) = 
于 是 Zi(tn, 十 z) 一 7 或 


Z(tn. + a) — Z(tnr) 一 70. (2.9) 
因为 这 对 每 个 a 都 成 立 且 2 是 有 界 的 ， 所 以 7 = 0. 同样 的 论证 可 用 下 限 来 证 明 
Zr(z) =0. 


因此 , 我 们 对 连续 可 微 的 z 证 明了 这 个 引 理 . 但 是 任意 一 个 连续 的 z 可 以 用 在 
0,h 外 等 于 0 的 连续 可 微 函 数 z1 来 通 近 . 令 Z1 是 相应 的 更 新 方程 的 解 . 于 是 


lz 一 z<e 蕴含 |2 一 21| < Che， 
从 而 对 于 所 有 充分 大 的 z,|2(z + a) - Z(z)| < (2Ch + 1)e. 因此 , 对 任意 的 连续 函 
数 z，(2.3) 都 成 立 . p 
现在 来 完成 定理 的 证 明 就 很 容易 了 . 如 果 了 是 区 间 a < z < 6, 那么 我 们 用 T+t 


表示 区 间 a+t < z < B+t. 由 (1.9) 我 们 知道 , 对 每 个 有 限 区 间 闷 V{T+ 甘 是 有 界 
的 . 因此 , 根据 8.6 节 的 选择 定理 2, 存在 这 样 的 序列 tk 一 co 和 一 个 测度 V, 使 得 


Ut{tx + dy} 一 V{dy}. (2.10) 


测度 V 在 有 限 区 间 上 是 有 限 的 , 但 不 集中 在 0, so 上 . 
现在 令 > 是 一 个 在 有 限 区 间 a 外 等 于 0 的 连续 函数 ,那么 对 于 更 新 方程 的 
相应 的 解 2， 我 们 有 


Z(tk+7) = 厂 z(—s)U{tk 十 z 十 ds} 一 三 z(—s)V{z + ds}. (2.11) 
0 0 
由 上 述 引 理 推出 , 测度 族 V{z + ds] 与 z 无 关 , 从 而 Y{T]} 与 工 的 长 度 成 正比 . 因 


此 (2.10) 可 以 写成 形式 
U(t#) — Ut — hh) — Yh. (2.12) 
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除了 因子 9-! 换 成 了 未 知 参 数 7 且 把 + 局 限于 序列 {t} 以 外 , 这 和 更 新 定理 的 结 
论 (1.9) 相同 . 但 是 ,我们 对 更 新 定理 的 另 一 形式 的 推导 仍然 成 立 , 因此 当 z 直接 
可 积 时 ， > 

Zt) =7 za (2.13) 


函数 z = 1 下 是 单调 的 , 它 的 积分 等 于 p. 相应 的 解 Z 是 常数 1. 如 果 p< co， 
那么 函数 z 是 直接 可 积 的 , (2.13) 说 明 yp = 1. 当 = oo 时 , 我 们 把 > 截 尾 ， 从 
(2.13) 可 以 推出 7 大 于 z 在 任意 区 间 0,a 上 的 积分 , 于 是 /= co 蕴含 Y= 0. 因 
此 (2.12) 中 的 极限 与 序列 {tk} 无 关 , (2.2) 化 成 了 更 新 定理 的 结论 (1.9). > 


*11.3 改 进 


在 本 节 中 我 们 将 说 明 分 布 的 正则 性 是 怎样 导致 更 新 定理 的 更 深刻 的 形式 的 . 
这 些 结果 本 身 并 不 是 令 人 兴奋 的 , 但 是 它们 在 许多 应 用 中 是 有 益 的 . 
定理 1 如 果 下 是 期 望 为 ,方差 为 0? 的 非 算 木 分布， 那么 
于 
亲 2p2 “ 


0<U(t) (3.1) 

更 新 定理 本 身 只 说 明 U(t) ~ t/p，, 这 个 估计 (3.1) 更 深刻 . 即使 在 方差 不 存在 
时 , 只 要 把 右边 换 成 oo 它 仍 成 立 . [第 1 卷 13.12 节 (12.2) 给 出 了 关于 算术 分 布 的 
类 似 定理 . ] 


证 设 
Z(t) = Ut) ~ t/p. (3.2) 
容易 验证 这 是 对 应 于 a 
0=2 /Peley (3.3) 
的 更 新 方程 的 解 , 利用 分 部 积分 法 ,我 们 得 到 
oo wd _ +p 
/Or (3.4) 


因为 z 是 单调 的 , 从 而 是 直接 可 积 的 , 所 以 更 新 定理 的 另 一 形式 断言 , (3.1) 是 正确 
的 


. p 
其 次 ,我 们 转向 更 新 函数 U 的 光滑 性 . 如 果 FF 有 密度 f, 那么 U 的 更 新 方程 
取 形 式 


v=1+ [ ve -nf Wa (3.5) 
* 本 节 在 初 读 时 可 以 格 去 . 
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如 果 f 是 连续 的 , 那么 形式 微分 表明 U 有 满足 如 下 方程 的 导数 内 
w®) = 0)+ [ eWay (8.6) 


这 是 标准 形式 的 更 新 方程 ,我 们 知道 当 f 有 界 (未 必 连 续 ) 时 它 有 唯一 的 解 . 容易 
验证 , 由 
U(t)=1+ yA u(y)dy, t>0, (3.7) 
0 


定义 的 函数 U 满足 (3.5). 从 而 (3.6) 的 解 4 确实 是 U 的 密度 . 因此 , 作为 更 新 定理 
的 另 一 形式 的 推论 我 们 得 到 
定理 2 如果 下 有 直接 可 积 的 密度 f， 那么 U 有 这 样 的 密度 u, 使 得 u(t) 一 -1. 

不 直接 可 积 的 密度 在 实际 中 几乎 不 发 生 ， 但 是 即使 对 于 它们 也 可 得 到 某 些 结 
论 , 事实 上 , 考虑 FF 太 F 的 密度 


f= re-orodr (8.8) 


一 般 来 说 , fo 的 性 质 要 比 /的 性 质 好 得 多 . 例如 , 如 果 f < M, 那么 我 们 由 对 称 性 
得 


falt) < 2M E 三 F(a)]: (3.9) 
如 果 / < co, 那么 右边 是 单调 可 积 函 数 , 这 蕴含 fo 是 直接 可 积 的 . 于 是 4 一 是 更 
新 方程 在 z = 户 时 的 解 , 因此 我 们 有 
定理 2a ”如果 斑 有 有 界 的 密度 f 和 有 限 的 期 望 h， 那么 


ub) — f= pT. (3.10) 


这 个 结果 是 难以 理解 的 , 因为 它 说 明 , 如 果 f 剧烈 地 振动 , 那么 4 将 以 补偿 它 
们 的 形式 进行 振动 . (有 关 的 结果 见习 题 7 和 习题 8. ) 

了 为 有 界 这 个 条 件 是 必 不 可 少 的 . 我 们 用 一 个 例子 来 说 明 这 一 点 , 这 个 例子 也 
能 帮助 我 们 理解 更 新 定理 中 的 直接 可 积 性 条 件 . 
例 (a) ” 设 G 是 由 下 式 定义 的 集中 于 I 上 的 概率 分 布 : 


Gl = Es 0<z<1. (311) 


它 有 一 个 在 开 区 间 IT 上 连续 的 密度 , 但 是 因为 当 z 一 0 时 x-1G(z) 一 oo, 所 以 
这 个 密度 在 原点 附近 是 无 界 的 . 如 果 每 个 分 量 小 于 z/n, 则 nn 个 具有 分 布 G 的 独立 
随机 变量 之 和 必然 小 于 z, 因此 


G™*(z) > (G(z/n))™. (3.12) 
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由 此 推出 , 对 于 每 个 mw, G"* 的 密度 在 原点 附近 是 无 界 的 . 

现在 设 F(z) = G(z 一 了 ,那么 F"*(z) = G"*(z 一 m)， 从 而 F"* 的 密度 当 
Zz < n 时 等 于 0， 当 z > n 时 是 连续 的 , 但 在 n 附近 是 无 界 的 . 因此 ， 更 新 函数 
U = 2F"* 的 密度 v 在 每 个 整数 n > 0 的 附近 是 无 界 的 
例 (b) 上 例 中 的 密度 v 满足 (3.6), (3.6) 与 z= f 时 的 标准 更 新 方程 (1.3) 一 致 
这 是 一 个 可 积 函 数 ， 当 z > 2 时 它 等 于 0, 除了 在 点 1 以 外 它 是 连续 的 . 解 2 = 
在 每 个 整数 附近 无 界 这 个 事实 说 明 ， 如果 z 不 是 正常 黎 曼 可 积 的 (有 界 的 ), 那么 更 新 
定理 可 能 不 成 立 , 即使 z 集中 在 有 限 区 间 上 也 不 行 . > 


11.4 ” 常 返 更 新 过 程 


现在 用 更 新 定理 来 推导 在 6.6 节 中 引入 的 更 新 过 程 的 各 种 极限 定理 . 我 们 来 讨 
论 具 有 共同 分 布 F 的 相互 独立 的 随机 变 基 Ti,T2,…-( 到 达 的 时 间 间 隔 ) 的 序列 . 在 
本 节 中 , 我 们 假设 下 是 一 个 正常 分 布 ，F(0) = 0. 除了 Ti 外 , 我 们 可 以 定义 一 个 
具有 正常 分 布 To 的 非 负 整 值 变量 So. 我 们 设 


Sn = 50+ T+ + Th. (4.1) 
变量 Sn 称 为 更 新 时 刻 . 如 果 So = 0, 那么 更 新 过 程 {5%} 称 为 纯 更 新 过 程 ， 否则 称 
为 延迟 了 的 更 新 过 程 . 
我 们 沿用 (1.2) 中 引入 的 记号 U = Fn*. 在 0 中 的 更 新 时 肇 的 期 望 个 数 为 
V(t) = 立 P{Sn < t} = FoxU. (4.2) 
n=0 


因此 , 对 h>0, 我 们 有? 
tth 
V+ VE) = / [UE+ hy) ~ Ut Fo{dy)}. (4.3) 


如 果 已 是 非 算术 分 布 , 那么 当 t 一 co 时 被 积 函数 趋 于 p-1h, 于 是 基本 定理 也 
可 以 推广 到 延迟 了 的 过 程 : 如 果 玉 是 非 算术 分 布 ,那么 在 6t 十 及 内 的 更 新 时 刻 的 其 
望 个 数 趋 于 J+h. 这 个 结论 包含 两 个 等 分 布 定 理 : 第 一 , 更 新 速度 趋 于 一 个 常数 ; 
第 二 , 这 个 常数 速度 和 初始 分 布 无 关 . 在 这 个 意义 下 , 我 们 有 一 个 类 似 于 第 1 卷 第 
15 章 中 马尔 可 夫 链 的 遍历 定理 的 定理 . 


@ 由 11.1 节 我 们 知道 , 积分 区 间 是 闭 的 ， 因 此 积分 限 可 以 换 为 一 co 和 co. 
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如 果 1 < co, 那么 当 t 一 co 时 V(t) ~ p71t 自然 要 问 ， 是 否 可 以 这 样 选择 
而 , 使 得 V(t) = pt, 此 式 表示 更 新 速度 是 常数 . 因为 Y 满足 更 新 方程 


V=F+FxV, (4.4) 
所 以 为 使 V(t) = jp-1t, 当 且 仅 当 


t 
m= 2/ tnrta. (45) 
利用 分 部 积分 法 可 以 证 明 这 和 下 式 相同 : 
t 
RO = h- Foy (4.6) 


这 个 是 一 概率 分 布 ， 从 而 答案 是 肯定 的 : 对 于 初始 分 布 (4.6), 更 新 速度 是 固定 
的 ,V(t) = pt. 

分 布 (4.6) 也 作为 剩余 等 待 时 间 的 极限 分 布 或 到 达 概 率 出 现 ,对 给 定 的 上 > 0， 
有 相应 的 一 个 依赖 于 机 会 的 下 标 Nt, 使 得 


SN St < SN (4.7) 


利用 6.7 节 中 引入 的 术语 , 变量 SN,,, 一 t 称 为 在 时 刻 t 的 剩余 等 待 时 间 . 我 们 用 
五 (t,&) 表示 它 < 的 概率 . 换 名 话说， 互 (tb 5) 是 时 刻 t 后 的 第 一 个 更 新 时 刻 位 于 
4t 十 内 的 概率 , 即 超过 水 平 + 的 量 < & 的 概率 . 如 果菜 个 更 新 时 刻 Sn 等 于 z < t，， 
且 随 后 的 到 达 时 间 间 隔 位 于 t 一 x 和 +t 一 z+& 之 间 , 那么 上 述 事 件 发 生 . 在 纯 更 新 
过 程 的 情形 下 , 对 z 和 n 求 和 , 我 们 得 到 


HO) = | Vase s+) -rea), (48) 


这 个 积分 包含 作为 一 个 自由 参数 , 但 它 具 有 标准 的 形式 U 友 z, 其 中 z(t) = F(t 十 
上 - Rb， 这 个 函数 是 直接 可 积 的 .9 假设 下 是非 算术 分 布 . 因为 


/ (bdt= [ -FOrF(t+ edt 
0 (4.9) 
三 人/ (1 — F(s))ds, 
0 
所 以 我 们 有 极限 定理 
Jim He=A1 [/ 和 olas (4.10) 
en 有 


四 对 巾 <z< (n 十 1), 我 人 有 z(z) < F((n 十 2)€) -下 (n6)， 具有 这 些 项 的 级 数 显然 是 收 敏 的 . 
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(容易 验证 这 对 延迟 了 的 过 程 也 成 立 , 不管 初始 分 布 Fo 怎样 . ) 这 个 极限 定理 在 几 
个 方面 是 值得 注意 的 . 正如 下 述 讨论 所 说 明 的 那样 , 它 与 6.7 节 中 的 检验 悖 论 及 1.4 
节 中 的 等 待 时 间 悖 论 有 密切 的 关系 . 

当 jp < co 时 极限 分 布 (4.10) 与 (4.6) 一 致 ， 于是， 如 果 H < oo， 那么 剩余 等 
待 时 间 有 正常 的 根 限 分 布 ， 这 个 分 布 与 获得 均 习 更 新 速度 的 分 布 一 致 . 在 这 个 模型 
中 , 我 们 再 次 看 到 了 趋 于 “定常 状态 ”的 趋势. 

只 有 当 FF 存在 有 限 的 方差 时 ，(4.10) 的 极限 分 布 才 有 有 限 的 期 望 . 粗略 地 说 ， 
这 表明 进入 概率 的 性 质 要 比 F 的 性 质 差 . 事实 上 ， 当 /= co 时 ,对 所 有 的 &, 我 们 
有 

H(t,€) = 0, (4.11) 


即 一 个 任意 大 的 量 E 超 过 水 平 t 的 概率 趋 于 1. (对 于 正则 变化 的 尾部 的 情形 , 更 确切 
的 信息 将 在 14.3 节 中 导出 . ) 
例 (a) 更 新 过 程 的 重 加 . 给 定 n 个 更 新 过 程 , 可 以 把 它们 的 所 有 更 新 时 刻 组 成 一 
个 序列 来 构成 一 个 新 过 程 . 一 般 说 来 , 这 个 新 过 程 不 是 更 新 过 程 , 但 容易 计算 出 时 
刻 0 后 第 一 次 更 新 的 等 待 时 间 W. 我 们 现在 来 证 明 , 在 相当 一 般 的 条 件 下 , W 的 分 
布 是 渐 近 指数 分 布 ， 从 而 组 合 过 程 接近 于 泊 松 过 程 . 这 个 结论 说 明了 为 什么 许多 过 
程 (例如 打 往 电话 交换 台 的 信号 ) 是 泊 松 型 的 . 
考虑 由 到 达 时 刻 的 间隔 的 分 布 及 ,…, Fn 导出 的 n 个 相互 独立 的 更 新 过 程 , 这 
些 分 布 的 期 望 为 ji,…, pn. 设 
1 和 
pr 
粗略 地 说 , 我 们 要 求 每 个 更 新 过 程 的 更 新 时 刻 是 极 少 的 , 使 得 积累 效应 是 由 许 
多 小 的 原因 引起 的 . 为 了 表达 这 一 点 , 我 们 假设 对 于 固定 的 及 和 wy, 概率 FF.(y) 很 
小 , pr 很 大 一 一 这 是 一 个 在 极限 定理 的 形式 中 很 有 意义 的 假设 . 
考虑 “定常 状态 ”的 情况 , 即 过 程 已 进行 了 很 长 时 间 . 那么 对 于 第 个 过 程 中 
最 近 的 更 新 时 刻 的 等 待 时 间 Wi, 我 们 近似 地 有 


(4.12) 


P{W <} 人/ Q- 玉 gjays 志 . (4.13) 


[后 一 近似 可 由 及 (y) 很 小 这 一 事实 得 到 . ] 积累 过 程 中 的 等 待 时 间 W 是 等 待 时 间 
Wi 中 的 最 小 者 , 从 而 


P{W > Q- 坪 )…(1- 去 ) erta. (414) 


很 容易 使 这 个 估计 更 精确 , 在 上 述 条 件 下 指数 分 布 作为 n 一 co 时 的 极限 分 布 出 现 . 
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例 (b) ”随机 游 动 中 的 到 达 概率 . 对 于 独立 随机 变量 序列 X1,X2,…, 令 
Yh = Xi + + Xn 


对 于 正 的 Xk, 随机 游 动 {Yn} 化 为 更 新 过 程 , 但 是 我 们 考虑 任意 的 X. 假设 随机 
游 动 是 常 返 的 , 因此 对 于 每 个 +> 0, 必然 有 一 个 n 使 得 区 > 上 如 果 N 是 使 这 成 
立 的 最 小 指标 , 那么 Yy 称 为 首次 进入 五 55 的 点 . 变量 Yy -上 是 在 首次 进入 时 超 
过 水 平 上 的 量 ， 它 相应 于 更 新 过 程 的 剩余 等 待 时 间 . 再 设 P{Yw < t+&} = H(t,€)， 
我 们 来 证 明 剩余 等 待 时 间 极 限定 理 也 适用 于 这 个 分 布 . 

把 5 定义 为 首次 进入 0,06 中 的 点 ,根据 归纳 法 ,把 Sn+1 定义 为 首次 进入 
Sn,00 中 的 点 . 序列 51,52,… 和 6.8 节 中 引入 的 阶梯 高 度 一 致 且 形成 一 个 更 新 过 
程 : 差 Sn+1 - Sn 显然 是 相互 独立 的 , 且 与 So 有 相同 的 分 布 . 因此 , Yw ~ 实际 上 
是 更 新 过 程 {5n} 的 剩余 等 待 时间 ， 从 而 (4.10) 成 立 . p 

利用 推导 (4.10) 的 方法 可 以 证 明 ， 已 度 过 的 等 待 时 间 t 一 Sn, 有 同样 的 极限 分 
布 . 对 于 包含 的 到 达 时 剂 的 间隔 的 长 度 Lt = SN,,, 一 SN,， 我 们 得 到 


€ 
P{Ze <é€}= 人 U(dz)[F(€) - Pt 一 z)]， (4.15) 
从 而 
€ 
lm P(r < = 人 IE-Folay 
€ 
一 AL / zF{dz}. 


这 个 公式 的 古怪 的 含义 在 6.7 节 中 讨论 检验 悖 论 时 以 及 在 1.4 节 中 讨论 等 待 时 间 的 
悖 论 时 已 讨论 过 . 

容易 看 出 , 3 个 变量 族 t 一 Sw,, Sw,,, 一 t, 和 Lt 都 形成 具有 平稳 转移 概率 的 马 
尔 可 夫 过 程 . 因此 ,我们 的 3 个 极限 定理 可 以 作为 马尔 可 夫 过 程 遍历 定理 的 例子 . 
(又 见 14.3 节 . ) 


(4.16) 


11.5 ”更 新 时 刻 的 个 数 TV。 


为 了 简单 起 见 ,我 们 考虑 纯 更 新 过 程 , 这 样 第 > 个 更 新 时 刻 是 + 个 有 共同 分 布 
/的 独立 变量 之 和 . 把 原点 当 作 更 新 时 刻 . 我 们 用 Nt 表示 在 55+ 内 的 更 新 时 刻 的 个 
数 . 为 使 事件 {Nt > 7} 发 生 , 当 且 仅 当 第 > 个 更 新 时 刻 属于 六 3， 从 而 


P{Ne > 7} = F"*(t). (5.1) 
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显然 Ne > 1. 由 此 推出 ， 


E(N) = DP{N >7} = U(). (5.2) 
r=0 
(关于 高 阶 矩 见习 题 13. ) 

变量 N 也 出 现在 序 贯 抽样 中 . 假设 抽样 {Tn} 连续 进行 到 观察 值 之 和 首次 大 
于 t+ 为止. 于 是 No 表示 总 的 试验 次 数 . 利用 改进 的 更 新 定理 提供 的 估计 (3.1)， 可 
以 避免 许多 元 长 的 计算 . 

如 果 下 的 期 望 py 和 方差 o? 都 存在 , 那么 F"* 是 渐 近 正 态 分 布 这 个 事实 确定 

了 Ni 的 分 布 的 渐 近 性 质 , 必要 的 计算 可 在 第 1 卷 13.6 节 中 找到 , 并 且 不 依赖 于 下 
的 算术 特性 . 因此 , 我 们 有 一 般 的 
Nz 的 中 心 极限 定理 ”如果 F 的 期 望 是 ,方差 是 0?， 那么 对 于 较 大 的 t, 更 新 时 刻 
的 个 数 N; 是 渐 近 正太 分布 的 ， 其 期 望 为 tu-1， 方 关 为 tr212. 
例 (a) I 型 计数 器 . 要 进入 计数 器 的 质点 构成 一 个 泊 松 过 程 . 在 计数 器 空闲 时 到 达 
计数 器 的 质点 被 记录 下 来 , 但 它 使 计数 器 关闭 一 段 时 间 , 这 个 时 间 有 固定 的 长 度 &. 
在 关闭 期 间 内 到 达 计 数 器 的 质点 一 点 也 不 起 作用 . 为 了 简单 起 见 , 我 们 让 这 个 过 程 
从 一 个 新 质点 到 达 空 闲 的 计数 器 的 时 刻 开始 . 于 是 我 们 有 2 个 更 新 过 程 . 主要 的 过 
程 (要 进入 计数 器 的 质点 流 ) 是 一 个 泊 松 过 程 ， 即 它 的 到 达 时 刻 的 间隔 服从 期 望 为 
c71, 方差 为 c-? 的 指数 分 布 1 - e-“t, 逐 次 的 记录 形成 另外 一 个 更 新 过 程 , 其 中 到 
达 时 刻 的 间隔 是 与 一 个 指数 随机 变 基 之 和 . 因此 , 两 次 记录 之 间 的 等 待 时 间 的 期 
望 为 E+c-!, 方差 为 c-?. 于 是 在 时 间 区 间 0,t 内 的 记录 次 数 是 渐 近 正太 的 ,其 期 望 
为 tc(1 + c)-1, 方差 为 tc(1 十 cE)3. 

这 些 量 之 间 的 差异 说 明 记录 不 服从 泊 松 分 布 ， 在 早期 人 们 不 明白 记录 过 程 与 
主要 过 程 有 本 质 的 差别 , 因此 使 一 些 物理 学 家 得 出 了 错误 的 结论 : 字 宙 线 显示 器 不 
符合 具有 “完全 随机 性 ”的 泊 松 模型 . 

为 使 N 的 极限 分 布 存在 , 当 且 仅 当 FF 属于 某 一 吸引 域 . 这 些 吸 引 域 的 特征 曾 
在 9.8 节 和 17.5 节 中 描述 过 . 由 此 知道 ,Nt 有 正常 的 极限 分 布 ， 当 且 仅 当 


1— F(z)~ 7z-°L(z), zo 0%, (5.3) 


其 中 工 是 缓慢 变化 的 , 0 < a < 2. 很 容易 得 到 Ni 的 极限 分 布 , 并 且 这 个 分 布 说 明 
了 振动 的 自 相 矛 盾 的 性 质 . 对 于 a < 1 和 a > 1, 性 质 是 完全 不 相同 的 . 
考虑 0 < a< 1 的 情形 . 如 果 这 样 选择 o-, 使 得 


rh -Fon = 到 2 (5 
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那么 Prw(orz) 一 Ga(z)， 其 中 G。 是 满足 下 列 条 件 的 单 侧 稳定 分 布 : 当 z 一 oo 
时 ,zell Ga(z)] 一 (2 - aya. (参阅 9.6 节 、17.5 节 及 13.6 节 . ) 令 r 和 这样 地 
增加 , 使 得 t+~ arz. 由 于 工 是 缓慢 变化 的 ， 所 以 我 们 从 (5.3) 和 (5.4) 得 到 


bn: .J 
TT (5.5) 


从 而 由 (5.1) 得 到 


2—a 


Pp 人 一 F(GD]Ne > < —» Ga(z). (5.6) 


a 
这 是 一 个 与 中 心 极限 定理 类 似 的 定理 . a = 3 的 特殊 情形 已 包含 在 第 1 卷 13.6 节 
中 . (5.6) 中 的 正规 化 因子 1 一 F(t) 表达 了 这 个 出 人 意料 的 特点 . 很 粗略 地 说 , 1 一 严 ( 
具有 数量 级 t"%, 从 而 Ne 的 可 能 的 数量 级 是 所, 更 新 时 刻 的 密度 必定 急剧 减少 (这 
和 到 达 概率 的 渐 近 性 质 一 致 ). 

当 1<a<2 时, 分 布下 的 期 望 < co, 同样 类 型 的 计算 说 明 


Pp 位 > 0e) Gal(z), (5.7) 


其 中 A(t) 满足 
ti -FOO 一 ep (5.8) 


在 这 种 情形 下 ， 更 新 时 刻 的 平均 个 数 是 线性 增加 的 , 但 是 正规 化 因子 A(t) 表明 在 
期 望 的 附近 的 起 伏 是 极为 激烈 的 


11.6 可 终止 (瞬时 ) 过 程 


具有 亏损 分 布 FF 的 更 新 过 程 的 一 般 理 论 几乎 没有 什么 价值 . 但 是 相应 的 更 新 
方程 常常 在 各 种 各 样 的 伪装 下 出 现 , 这 种 伪装 具有 能 掩盖 一 般 背 景 的 特点 . 清楚 地 
理解 这 个 基本 事实 可 以 在 各 种 应 用 中 避免 麻烦 的 论证 . 特别 , 利用 定理 2 的 渐 近 估 
计 可 获得 原先 由 著名 的 维 纳 - 堆 普 夫 (Wiener-Hopf) 方法 的 特殊 修正 推导 出 的 结 
果 . 

为 避免 记号 的 混乱 ， 我 们 把 基本 分 布 FF 换 成 L， 因 此 ， 在 本 节 中 工 表示 满 
足 L(0) = 0 和 (co) = Leo < 1 的 亏损 分 布 . 它 作为 (亏损 的 ) 到 达 时 刻 间隔 ZT 的 
分 布 , 亏 量 1 - Ze。 表示 终止 概率 . 把 时 间 轴 的 原点 当 作 第 0 个 更 新 时 刻 ，Sn = 
十 … 十 Tn 是 第 nn 个 更 新 时 刻 , 它 是 一 个 分 布 为 L"* 的 亏损 变量 , 分 布 的 总 质 
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量 Zn*(co) = La%. 气量 1- 到。 是 在 第 n 个 更 新 时 刻 前 终止 的 概率 . 我 们 又 设 


了 = 》 I". (6.1) 
n=0 


和 常 返 过 程 中 一 样 , U(t) 等 于 在 ,2 内 更 新 时 刻 的 期 望 个 数 ,但 是 现在 所 有 的 
更 新 时 刻 的 期 望 个 数 是 有 限 的 ， 即 


U(oo) = 和 (6.2) 


Zoo 


第 n 个 更 新 时 刻 Sn 是 最 后 一 个 更 新 时 刻 , 且 < z 的 概率 等 于 (1 一 Loo)L"*(z). 因 
此 , 我 们 有 

定理 1 从 原点 开始 的 皮 时 更 新 过 程 以 概率 1 终止 . 终止 时 刻 M( 即 序列 0,S1, Sa,…' 达 
到 的 最 大 值 ) 有 正常 分 布 


P{M < 2} = (1- Loo)U(z). (6.3) 


第 nn 个 更 新 时 刻 是 最 后 一 个 更 新 时 刻 的 概率 等 于 (1 Lae), 因此 更 新 时 刻 的 个 
数 服从 一 个 几何 分 布 . 
可 以 用 下 列 (亏损 的 ) 更 新 方程 来 表达 上 述 这 些 结果 : 
20=20+ { Zt -Wrtavy, (6.4) 


但 是 对 于 亏损 的 工 , 这 个 理论 是 不 足 道 的 . 又 假设 对 z < 0, z(z) = 0, 则 唯一 解 为 


有, 
z0= 人 ze-wv{ay). (6.5) 

车 在 t 一 o0 时 z() 一 (oo), 则 显然 有 
Z(t) 一 (6.6) 


例 (a) ”如 果 过 程 在 So 上 终止 , 或 者 如 果 Ti 取 某 一 正 值 y < t 且 剩余 的 过 程 的 寿 
命 <t 一 y, 那么 事件 {M 和 甘 发生. 因此, Z(t) = P{M 和 甘 满 足 更 新 方程 


Z(t) =1— Loo+ / ‘Z(t _ WIAay}, (6.7) 


这 等 价 于 (6.3). 
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例 (b) ”起 的 计算 . 上 述 方程 把 正常 分 布 2 表示 为 2 个 亏损 分 布 ( 即 一 个 卷 积 与 一 
个 在 原点 有 一 个 原子 的 分 布 ) 之 和 . 为 了 计算 2 的 期 望 , 令 


B= / ~ zoL{dz}. (6.8) 


对 于 其 他 的 分 布 是 类 似 的 ,不 管 分 布 是 不 是 亏损 的 . 因为 工 是 亏损 的 ， 所 以 (6.7) 
中 的 卷 积 的 期 望 为 Lo . Ez + EL. 因此 ,Ez = EL/(1 - Fe). 对 于 更 一 般 的 方程 
(6.4), 我 们 可 以 同样 的 方式 得 到 
_Ez+Er 
1-Lo 
可 以 用 同样 的 方法 计算 高 阶 矩 . 和 
渐 近 估计 
在 应 用 中 z(t) 通常 趋 于 一 极限 z(co). 在 这 种 情形 下 , Z(t) 趋 于 由 (6.6) 给 出 的 
2Z(co). 得 到 差 Z(co) -~ 2Z(b) 的 渐 近 估计 常常 是 很 重要 的 . 这 可 以 用 一 个 在 随机 游 动 
理论 中 具有 广泛 适用 性 的 方法 来 得 到 [ 见 12.4 节 例 (b) 中 的 相伴 随机 游 动 ]. 它 依 
赖 于 下 述 (通常 是 无 害 的 ) 假设 : 存在 一 个 数 , 使 得 


Ez (6.9) 


人/ ewvL{dy} =1. (6.10) 
0 
这 个 根 上 显然 是 唯一 的 , 由 于 分 布 工 是 亏损 的 , 所 以 上 > 0. 我 们 现在 用 

L#{dy} = ewL{dy} (6.11) 


定义 一 个 正常 概率 分 布 L#. 对 于 每 个 函数 /定义 一 个 新 函数 1#， 
f#{dy} = ewL{dy} 
与 它 对 应 . 由 (6.4) 可 知 ,更 新 方程 
z+ =a#()+/ Ed (6.12) 


成 立 . 于 是 , 如 果 2#(t) 一 a 关 0, 那么 Z(t) ~ ae 已. 因此 , 如 果 z# 是 直接 可 积 的 
[在 这 种 情形 下 z(co) = 0], 那么 更 新 定理 蕴含 


et2(t) 一 元 ekzz(z)dz， (6.13) 
0 


其 中 pe 
= eure. (6.14) 
0 
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在 (6.13) 中 我 们 得 到 了 2 (b) 对 较 大 的 t 的 一 个 良好 的 估计 . 

稍微 作 一 下 修改 , 这 个 程序 也 可 适用 于 z(co) 关 0 的 情形 . 
令 

z1(t) = z(00) — z(t)+ zo) 守 人 

容易 验证 , 差 Z(co) - Z(t) 满足 把 z 换 成 za 的 标准 更 新 方程 (6.4). 简单 的 分 部 积 
分 说 明 ,z#(z) = z1(z)e** 的 积分 由 (6.15) 的 右边 给 出 . 因此 , 把 (6.13) 应 用 于 zi， 
我 们 得 到 
定理 2 如 果 (6.10) 成 立 ,那么 更 新 方程 的 解 满足 


phot [Z(00) — Z(0)] — 2) 


(6.15) 
+ /0 e**[z(00) — z(z)]dz, 
只 要 1 关 o0 且 zl 是 直接 可 积 的 
对 于 特殊 情况 (6.7), 我 们 得 到 
P{M >#}~ Le. (6.16) 


在 下 一 节 中 将 说 明 这 个 估计 的 惊人 的 威力 . 特别 , 例 (b) 说 明 我 们 的 简单 方法 
有 时 可 迅速 导致 过 去 常常 需要 高 深 且 费 力 的 方法 才能 得 到 的 结果 . 

Ze > 1 的 情形 . 如 果 Ls。> 1, 那么 存在 一 个 这 样 的 常数 上 < 0, 使 得 (6.10) 成 
立 ， 上 述 变换 把 积分 方程 (6.4) 化 成 (6.12). 因此 ,利用 更 新 定理 可 导出 Z(t)ekt 的 
浙 近 性 质 的 精确 估计 . [离散 的 情形 包含 于 第 1 卷 13.10 节 的 定理 1 中 . 关于 在 人 口 
统计 学 中 的 应 用 , 见 第 1 卷 12.10 节 例 (e). ] 


11.7 各 种 各 样 的 应 用 


正如 我 们 已 经 指出 的 那样 ， 上 节 的 理论 可 以 应 用 于 在 概念 上 与 更 新 过 程 无 直 
接 关系 的 问题 , 在 本 节 中 我 们 给 出 2 个 独立 的 例子 . 
例 (a) 克拉 美的 破产 估计 在 6.5 节 中 曾 指出 , 复合 泊 松 过 程 中 的 破产 问题 和 储 
存 设备 .病人 治疗 时 间 表 有 关 的 问题 都 依赖 于 一 个 集中 在 05 上 的 概率 分 布 及 ,这 
个 分 布 满足 积 微分 方程 


RO= Sa- 和 Re- Pan (yD 
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其 中 万 是 一 个 正常 分 布 .? 在 BE 上 积分 (7.1) 并 进行 明显 的 分 部 积分 , 我 们 得 到 
t 
RE- R(O)= 2 人/ R(t — oD) — F(z)ldz. (72) 


此 处 R(0) 是 一 个 未 知 常数 , 但 否则 的 话 (7.2) 是 一 个 带 有 亏损 分 布 二 的 更 新 方程 , 
的 密度 为 a/c[1 - F(z)]. 如 果 以 人 表示 五 的 期 望 , 那么 工 的 质量 等 于 La = ap/c. 
[ 只 有 当 Ze < 1 时 , 这 个 过 程 才 有 意义 , 因为 否则 对 于 所 有 的 t, R(t) = 0] 注意 
(7.2) 是 (6.4) 的 特殊 情形 , 并 且 R(co) = 1. 回忆 (6.6), 我 们 可 得 


R(0) = 1— ap/e, (7.3) 


利用 这 个 值 , 积分 方程 (7.2) 化 成 ,该 过 程 的 到 达 时 刻 间 隔 分 布 为 工 的 可 终止 过 程 
的 寿命 M 的 分 布 的 形式 (6.7). 由 (6.16) 推出 ， 如 果 存 在 一 个 常数 F， 使 得 


2 / erz[1 — F(z)]Jdz =1 (7.4) 
和 
r= [ ekzzll — Flzjldz < o0, (7.5) 
那么 当 t 一 oo 时 
1— R(t) ~ 下 (1 华 )s. (7.6) 


这 是 原先 用 高 深 的 复 变数 方法 导出 的 著名 的 克拉 美 估计 . 的 矩 可 用 11.6 节 例 (b) 
中 所 述 的 方法 去 计算 . 

例 (b) ” 泊 松 过 程 中 的 间隔 在 6.7 节 中 我 们 对 于 更 新 过 程 中 第 一 个 长 度 > & 的 间 
隔 的 等 待 时 间 的 分 布 Y 导出 了 更 新 方程 . 当 更 新 过 程 是 泊 松 过 程 时 , 到 达 时 刻 的 间 
隔 服 从 一 个 指数 分 布 , 6.7 节 (7.1) 更 新 方程 具有 标准 形式 V = z 十 V 友 L, 并且 


L(z)=1-e-®“, z(z)=0, 当 z < 时 ， 


L(z)=1—-e-“,， z(z)=e-“， 当 z > 上 时 . CU 


因为 x(co) = 1 一 Ze, 所 以 正如 这 个 问题 所 要 求 的 那样 , 解 V 是 一 个 正常 分 布 . 
等 待 时 间 W 的 算 容 易 用 11.6 节 例 (b) 所 述 的 方法 来 计算 . 我 们 得 到 


cE 二 3 
E(W) = 一- 1 Var(W)=® 上 eee (7.8) 


@ 这 是 6.5 节 (5.4) 的 特殊 情形 , 此 时 开 集中 于 页 55 上 . 在 14.2 节 例 (b) 中 将 应 用 拉 普 拉 斯 变换 来 
讨论 它 . 一 般 情形 将 在 12.5 节 中 研究 . 
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如 果 我 们 把 W 看 作 行 人 为 穿 过 车 流 所 需 的 等 待 时 间 , 那么 这 些 公 式 揭示 了 一 
个 不 断 增 加 的 车 流速 度 的 作用 . 在 穿 过 时 间 中 汽车 的 平均 数目 是 <. 取 cé = 1,2， 
我 们 分 别 得 到 E(W) = 1.725 和 E(W) = 3.26. 方差 大 约 从 &? 增加 到 6€?. [关于 显 
式 解 及 其 和 覆盖 定理 的 关系 , 见 14.2 节 例 (a).] 可 应 用 渐 近 估计 (6.4). 如 果 cé > 1， 
那么 方程 (6.10) 化 成 


Ce“ ok, O0<n<ce. (7.9) 


通过 计算 , 我 们 从 (6.14) 得 到 
1_y 人 ~ ew (7.10) 


> 


11.8 ”随机 过 程 中 极限 的 存在 性 


最 能 说 明 更 新 定理 的 威力 的 大 概 是 这 样 一 个 事实 ， 即 更 新 定理 能 使 我 们 很 容 
易 在 很 大 一 类 随机 过 程 中 推导 出 “定常 状态 ”的 存在 性 . 关于 过 程 本 身 ， 我 们 只 需 
要 假设 所 讨论 的 概率 是 完全 确定 的 , 否则 定理 是 纯 分 析 的 .2 

考虑 一 个 具有 可 数 多 个 状态 Eo, 1,… 的 随机 过 程 , 用 P(t) 表示 Ek 在 时 刻 
t > 0 时 的 概率 . 下 列 定理 依赖 于 “循环 事件 ”的 存在 性 ， 即 依赖 于 使 过 程 重 新 开 
始 的 时 刻 的 存在 性 . 更 确切 地 说 ， 我 们 假设 以 概率 1 存在 一 个 时 刻 51, 使 得 过 程 
在 5S1 以 后 的 部 分 是 从 0 开始 的 整个 过 程 的 概率 复制 品 . 这 蕴含 具有 同样 性 质 的 时 
刻 52,53,… 的 存在 性 . 序列 {Sn} 形成 一 个 常 返 更 新 过 程 , 我 们 假设 平均 循环 时 间 
/= E(S) 是 有 限 的 . 我 们 用 P(t) 表示 在 给 定 51 = s 下 状态 Ek 在 时 刻 t+ s 时 的 
条 件 概率 . 假设 这 些 概率 与 s 无 关 . 在 这 些 条 件 下 , 我 们 来 证 明 一 个 重要 的 
定理 

Jim, RD 一 其 (8.1) 

存在 , 其 中 pk > 0, Zpk = 1. 
证 令 gxrlt) 是 “51 > 上 且 在 时 刻 上 系统 处 于 状态 E” 这 个 事件 的 概率 , 于 是 


or =1— F(t), (8.2) 
k=0 
其 中 玉 是 循环 时 间 Sw+1 5, 的 分 布 . 根据 假设 
PW= m+ { Pewr{ay). (8.3) 
0 


@ 关于 更 复杂 的 结果 , 见 V. E. Benes, A “renetal" limit theorem for general stochastic processes, 
Ann. Math Statist, vol. 33(1962) pp. 98-113, 或 他 的 书 (1963). 
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函数 gk 是 直接 可 积 的 ,因为 它 由 单调 可 积 函数 1 一 下 所 控制 . 因此 , 根据 第 二 更 新 
定理 ， 


lim P(t) = [ bd (8.4) 


tio00 


(8.2) 的 积分 表明 , 这 些 极限 相 加 等 于 1， 从 而 定理 得 证 . 

值得 注意 的 是 , 在 证 明 极限 (8.1) 的 存在 性 时 , 我 们 并 没有 用 到 计算 极限 (8. 1 
的 方法 
注 “如果 是 正常 分 布 , 那么 (8.1) 蕴含 


[ Pe-Wrtay = Pe tm ood. Ga 


因此 , 本 定理 也 包含 延迟 了 的 更 新 过 程 {5。} 的 情形 , 其 中 So 有 正常 分 布 印 . 

例 (a) ”排队 论 . 考虑 由 一 个 或 几 个 “服务 员 ” 组 成 的 设施 (电话 交换 台 、 邮 电 局 或 
一 个 计算 机 的 部 件 ), 并 令 状 态 Ei 表示 在 这 个 设施 中 有 K 个 “顾客 ”. 在 大 多 数 模 
型 中 . 当 到 来 的 顾客 看 到 系统 处 于 状态 Eo 时 , 过 程 重新 开始 . 在 这 种 情形 下 , 为 使 
我 们 的 极限 定理 成 立 , 当 且 仅 当 这 样 的 时 刻 以 概率 1 发 生 , 并且 其 期 望 是 有 限 的 . 
例 (b) 两 级 更 新 过 程 , 设 有 两 个 可 能 的 状态 瑟 , Ea. 最 初 系统 处 于 i. 在 Bl 上 
逐次 逗留 的 时 间 是 具有 共同 分 布 五 的 随机 变量 X;. 它们 与 在 Ba。 上 的 逗留 时 间 六 
相互 交替, 这 些 Y; 具有 相同 的 分 布 F. 照例 假设 所 有 的 变 基 是 独立 的 , 我 们 就 得 
到 了 一 个 到 达 时 刻 的 间隔 分 布 为 = 玉碎 及 的 嵌入 更 新 过 程 . 假设 E(X;) = 1 < 


00,E(7) = ja < oo. 显然 q1(t) = 1 一 (t), 因此 当 t 一 00 时, Ei 的 概率 趋 于 极限 
wh = 
nO- PO- (86) 
这 个 论证 可 推广 到 多 级 系统 . 


例 (c) 第 1 卷 第 17 章 中 的 微分 方程 对 应 于 一 些 随机 过 程 , 其 中 向 任 一 状态 的 逐 
次 返回 形成 一 个 所 要 求 的 类 型 的 更 新 过 程 . 因此 , 我 们 的 极限 定理 极限 概率 的 存在 
性 , 利用 把 导数 换 成 0 的 微分 方程 很 容易 得 到 它们 的 显 式 .[ 例如 见 第 1 卷 17.7 节 
(7.3). 我 们 将 在 14.9 节 中 更 系统 地 讨论 这 个 问题 . 同样 的 论证 也 适用 于 14.10 节 的 
习题 14 所 述 的 半 马 尔 可 夫 过 程 . ] p> 
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在 本 节 中 我 们 将 把 更 新 理论 推广 到 不 集中 于 一 条 射线 上 的 分 布 上 . 为 避免 不 足 
道 的 情形 , 我 们 假设 F{=oo, 四 > 0, FP{0,00} > 0, 并 且 下 是 非 算术 分 布 . 类 似 于 
第 一 节 ,对 算术 分 布 所 需要 做 的 修改 是 显然 的 

* 后 面 用 不 到 本 节 的 内 容 - 
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由 6.10 节 我 们 知道 , 分 布 下 是 矣 时 的 , 当 且 仅 当 对 于 所 有 有 限 区 间 ， 
U{D}= bp Er*{I)} (9.1) 


n=0 
是 有 限 的 . 否则 对 于 每 个 区 间 , UV{7} = oo, 此 时 称 玉 是 常 返 的 . 对 于 瞬时 分 布 有 这 
样 一 个 问题 : 11.1 节 的 诸 更 新 定理 可 以 搬 过 来 吗 ? 这 个 问题 引起 了 许多 数学 家 的 兴 
趣 , 这 与 其 说 是 由 于 它 本 身 的 重要 性 , 倒 不 如 说 是 由 于 它 的 意 想不到 的 困难 . 因此 ， 
更 新 定理 被 布莱克 韦 尔 (Blackwell), 钟 开 莱 , 钟 开 莱 和 波 拉 德 , 钟 开 莱 和 华 尔 夫 维 
获 , Karlin 和 Smith 逐步 推广 到 了 各 种 特殊 的 瞬时 分 布 , 但 一 般 的 定理 是 费 勒 和 奥 
雷 (Orey) 在 1961 年 利用 概率 工具 和 伟 里 叶 分 析 工 具 证 明 的 . 下 述 证 明 是 相当 简单 
且 比 较 初等 的 . 事实 上 , 当 五 的 期 望 有 限时 ，11.2 节 给 出 的 证 明 可 以 毫 不 改变 地 搬 
过 来 . (关于 平面 内 的 更 新 理论 , 见习 题 20. ) 
下 文中 将 用 到 这 样 一 个 事实 : 期 望 4 关 0 的 分 布 是 瞬时 的 ( 见 6.10 节 的 定理 
人 .照例 , 了 +t 仍 表示 把 了 平移 t 后 所 得 的 区 间 . 
一 般 的 更 新 定理 (a) 如 果 下 的 期 望 > 0， 那 么 对 于 每 个 长 度 为 > 0 的 区 间 J， 
h 
UI+H mB tm, (9.2) 
U{I+t} = 0,，t— -oo. (9.3) 
(b) 如 果 忆 是 盱 时 的 且 期 望 不 存在 ,那么 对 于 每 个 有 限 区 间 J, 当 t-， 士 oo 时 ,7 
+ 相 一 0. 
今后 我 们 认为 ，F 是 肯 时 的 ，> 是 在 有 限 区 间 -h < z < 外 等 于 0 的 连续 函 
数 , 上 且 z> 0. 
在 证 明定 理 之 前 , 我 们 回忆 一 下 曾 在 6.10 节 中 证 明 过 的 几 个 事实 . 
由 oO 
zw)=/ (eV{ay)} (94) 
定义 的 卷 积 2 =U 次 z 是 完全 确定 的 , 因为 实际 的 积分 区 域 是 有 限 的 . 根据 6.10 节 
的 定理 2, 这 个 Z 是 一 个 连续 函数 ， 且 满足 更 新 方程 


和 ZZ 二 z 十 友 芭 ， (9.5) 
而 且 2 在 使 得 z(€) > 0 的 点 上 上 取得 极 大 值 . 
设 =F 到 十 … 十 F" 友 . (9.5) 的 每 个 非 负 解 2 满足 2 > z = Uo 六 z, 从 而 由 


归纳 法 有 2 > Un 妇 z. 由 此 推出 , 在 对 于 任 一 其 他 的 非 负 解 2Z1 都 有 Z1 > 2 的 意 
义 上 , 解 (9.4) 是 最 小 的 . 因为 Z1 = Z + const 也 是 解 , 所 以 


lim inf2Z(z) =0,， z — +o0. (9.6) 
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引 理 1 对 于 每 个 常数 a， 
Z(z +a) — Z(z) 一 0，z 一 +oo. (9.7) 


证 证 明和 11.2 节 引 理 2 的 证 明 相同 , 在 那里 我 们 利用 了 这 样 一 个 事实 , 即 卷 积 
方程 


C= FC (9.8) 


在 z=0 点 达到 最 大 值 的 有 界 一 致 连续 解 是 一 个 常数 . 这 对 不 集中 0,06 上 的 分 布 
也 仍然 是 正确 的 , 证 明 实际 上 更 简单 , 因为 现在 由 FF?*,… 的 增 点 构成 的 集合 工 
是 处 处 稠密 的 . p 
虽然 我 们 以 后 不 明显 地 利用 它 , 但 我 们 仍 给 出 下 列 有 趣 的 

系 0 (9.8) 的 每 个 有 界 连 续 解 是 一 个 常数 . 

证 ”如果 是 一 致 连续 的 , 那么 可 以 不 加 改变 地 应 用 引 理 1 的 证 明 . 如 果 G 是 一 
个 任意 的 概率 分 布 , 那么 &1 = G 太 5 也 是 (9.8) 的 解 . 我 们 可 以 选择 这 样 的 G, 使 得 
所 有 有 界 的 导数 ,因而 是 一 致 连续 的 . 特别 ,上 与 任意 正 态 分 布 的 卷 积 是 一 个 常数 . 
令 G 的 方差 趋 于 0, 我 们 看 到 本 身 是 一 个 常数 . > 
期 望 存 在 时 更 新 定理 的 证 明 ” 当 0 </ < co 时, 只 要 把 11.2 节 的 证 明 作 一 个 不 足 
道 的 改变 就 行 了 . 在 最 后 的 关系 式 (2.13) 中 , 我 们 利用 了 试验 函数 z = 1 下. 对 此 
函数 , 解 2 化 成 常数 1. 现在 我 们 改 用 


z= FF (9.9) 


对 于 它 Un 六 z 一 Fox 一 mtD) 太 ,因此 p> 0, 所 以 显然 有 2 = Fo*. 
应 该 注意 到 , 当 /= +oo( 这 意味 着 ZF{dz} 在 56 上 的 积分 发 散 , 但 在 二 65,0 
上 的 积分 收敛 ) 时 , 仍 可 应 用 这 个 证 明 . > 
当期 望 不 存在 时 , 证 明 上 述 定理 需要 更 精细 的 分 析 . 下 列 引 理 说 明 只 要 对 一 个 
尾部 证 明 这 个 断言 就 够 了 . 
引 理 2 假设 期 望 不 存在 , 并 且 


U{I-t} ~» 0, t— +o0, (9.10) 
那么 也 有 
U{I+t} = 0,t— +o0. (9.11) 


@ 这 个 系 对 任意 群 上 的 分 布 都 成 立 ， 见 G. Choquet and J. Deny, C. R. Acad. Sci. Paris, vol. 
250 (1960) pp. 799-801. 
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证 我 们 利用 11.4 节 例 (b) 中 关于 由 FF 支配 的 随机 游 动 的 到 达 概 率 的 结果 ， 用 
瑟 (t,é&) 表示 首次 进入 五 co 发 生 在 t 到 t+ 之 间 的 概率 . 区 间 了 十 上 关于 上 十 所 占 
的 位 置 与 1 一 z 关于 上 所 占 的 位 置 相同 ,从 而 


U{I+ 相 = A ”ttaeufT- 司 . (9.12) 
考虑 随机 游 动 的 第 一 步 ， 我 们 看 到 
1- H(0,é) >1- F(é). (9.13) 


我 们 已 经 知道 , 如 果 / < co 或 p= -co, 即 如 果 右 边 在 0,06 上 是 可 积 的 , 那么 这 个 
断言 是 正确 的 . 否则 互 的 期 望 是 无 限 的 , 从 而 对 于 每 个 上, 当 t 一 oo 时 H(t,é) 一 0. 
因此 , 对 于 较 大 的 t, 实际 上 只 有 较 大 的 & 起 作用 , 并 且 对 于 这 些 & 的 值 , U{1 一} 
很 小 . 于 是 (9.11) 是 (9.10) 和 (9.12) 的 直接 推论 . > 
引 理 3 ”假设 Z(t) < m， 并 选择 这 样 的 p > 0, 使 得 p = 1 一 pm > 0. 对 于 给 定 
的 E> 0, 存在 这 样 的 se， 使 得 对 于 s > sc， 或 者 


2(s) <e, (9.14) 


或 者 对 所 有 的 T， 
Z(s+7) > pZ(s)Z(z). (9.15) 
证 由 2Z 的 一 致 收敛 性 和 引 理 1, 我们 可 以 选择 这 样 的 sc, 使 得 当 s > se 且 |z| <h 
时 ， 
2Z(s+z) 一 Z(z) > -ep'. (9.16) 
令 
W(z) = 2Z(s+7)— p2(s)2(7), 
us(z) = Z(s+7)—p2(s)2(7). 
VV 满足 更 新 方程 V = vs 十 了 克 Vs， 并且 由 引 理 1 之 前 的 说 明 可 知 , 如 果 Vs 取 负 
值 , 那么 它 在 使 v(5) < 0 的 点 5 上 取得 最 小 值 ， 从 而 [| < h. 于 是 由 (9.16), 我 们 
有 , 如 果 s > se, 那么 


(9.17) 


Vlé) > -ep' 二 2Z(s)I 一 pZ(6] > p12(s) — a). (9.18) 


因此 , 或 者 (9.14) 成 立 , 或 者 Vs 不 取 负 值 , 在 这 种 情形 下 (9.15) 成 立 . es 
引 理 4 设 


lim supZ(z) = %,， z 一 +o0%0, (9.19) 
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那么 也 有 
lim sup[Z(z) + Z(-7)] =7,，£ = +00. (9.20) 
证 ”选择 这 样 的 a, 使 Z(a) < 5; 由 (9.6), 这 是 可 能 的 . 根据 上 一 引 理 , 对 于 充分 
大 的 s, 或 者 
pZ(s)Z(a—s) < 2(a) <56, (9.21) 
或 者 Z(s) < e. 因为 < 是 任意 的 ， 所 以 不 等 式 (9.21) 对 于 所 有 充分 大 的 s 恒 成 立 . 
根据 引 理 1, 这 蕴含 9 
2Z(s)2(-s) 一 0. (9.22) 
因此 ， 对 于 很 大 的 z, 或 者 Z(z) 很 小 , 或 者 Z(-z) 很 小 . 因为 Z > 0， ne 
(9.19) 蕴含 (9.20). 
定理 的 证 明 ”假设 > 0, 因为 否则 就 没有 什么 可 证 明了 . 考虑 QZ 和 zz 与 0,t 5 的 
均匀 分 布 的 卷 积 , 即 


Wi(z) = Z(y)dy, ut(z) = i [zWar (9.23) 
我 们 的 下 一 个 目标 是 证 明 ， 当 + 一 co 时 关系 式 
1 t 
WW=}/ ZWav—n 
或 
Wi(0) =3 上 Z(Way = (9.24) 


之 一 一 定 成 立 . 

由 (9.7)，Z(z) 和 Wi(z) 的 上 界 (对 于 固定 的 切 是 相同 的 ， 从 而 Wi 的 最 大 
值 > n. 另 一 方面 ,Wi 满足 把 z 换 成 we 的 更 新 方程 (9.5). 如 前 所 述 ， 这 歼 含 Wi 
在 使 ut 为 正 的 点 上 , 即 在 -和 t+ 十 之 间 达 到 最 大 值 ._ 对 于 了 Sm < 怕 


wo=}/ zWar+} {2+ 2 (925) 


两 个 积分 区 间 的 长 度 的 和 是 z。 因此 由 (9.20) 可 知 ， 对 于 充分 大 的 ,Wi(z) < 
7(z/t) +e 于 是 ， 如果 We(z) > n， 那 么 点 z 一 定 接近 于 t,Wilt) 一 定 接近 于 
@ 容易 看 出 , (9.22) 等 价 于 U{I 十 如 U{7 一 如 一 0. 如 果 p{1} 表示 由 严 支配 的 随机 游 动 {Sm} 进 


入 工 的 概率 ,那么 (9.22) 也 等 价 于 p{I 十 十 p{T 一 甘 一 0. 如 果 这 不 成 立 , 那么 在 进入 了 十 一 
次 后 到 达 原点 旁 的 概率 不 趋 于 0, FF 不 可 能 是 瞬时 的 . 
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7. 如 果 Wi 在 点 7z << 3 上 达到 最 大 值 , 那么 类 似 的 论证 表明 z 一 定 接近 于 0, Wi(0) 
一 定 接近 于 7. 

我 们 现在 已 经 证 明了 , 对 于 较 大 的 t, 或 者 Wilt) 接近 于 1, 或 者 Wi(0) 接近 于 
7. 但 由 (9.23) 可 以 看 出 , 由 (9.20), 应 有 


lim sup[Wi(t) + Wi(0)] = lim sup #7 / ‘2 (y+2(-Way < n. (9.26) 


因此 ， 由 这 两 个 函数 的 连续 性 推 知 , 或 者 Wi(t) 一 7,We(0) 一 0, 或 者 这 些 关系 式 
对 交换 了 的 极限 成 立 . 
由 对 称 性 , 我们 可 以 假设 Wi() 一 n, 即 


w= {26ay 
=t-! 人 [2(¥t+%) + z(¥- vay 一 小 
由 此 推出 ， 对 于 任意 大 的 t， 存 在 这 样 的 值 x 使 得 Z(z) 和 2Z(t - z) 两 者 都 接近 


于 n. 根据 引 理 3， 这 蕴含 对 于 较 大 的 t,2(t) 取 0 以 外 的 有 界 值 ， 从 而 由 (9.22) 得 
GD- 一 0. 因此 , 当 t 一 co 时 ,TU{T- 甘 一 0 由 引 理 2, 这 就 完成 了 证 明 . > 


(9.27) 


11.10 习 题 


(也 见 6.13 节 中 的 习题 12~ 习题 20. ) 

1. 去 掉 F(0) = 0 这 一 假设 , 相当 于 把 下 换 成 分 布 F# = pHo + gF, 其 中 Ho 集中 于 原 
点 上 , p+9= 1. 那么 U 由 U*# = U/q 代替 . 证 明 这 在 概率 上 是 定义 的 明显 的 推论 ， 
并 在 形式 上 (a) 通过 计算 卷 积 ，(b) 由 更 新 方程 来 验证 这 个 断言 . 

2. 如 果 已 是 矶 I 上 的 均匀 分 布 , 证 明 


Ul) = DD gtgntl. 
k=0 
在 排队 论 中 经 常 遇 到 这 个 公式 , 但 它 没有 揭露 出 U 的 本 质 . 渐 近 公式 0 < U(t) 一 2t 一 3 
更 有 趣 . 它 是 (3.1) 的 直接 推论 . 
3. 假设 z > 0, 且 |z| 在 机 00 上 是 可 积 的 , 证 明 > 是 直接 可 积 的 . 
洁 ， 在 下列 3 个 习 呈 中, 我们 假设 4 和 2 是 相应 于 = 和 的 标准 更 新 方程 (1 


4. 如 果 > 一 oo 上 且 当 z 一 co 时 za~z, 证 明 2 ~ 
5. 如 果 za 是 z 的 积分 , 且 z1(0) = 0, 那么 21 是 2 的 积分 . 证 明 : 如 果 z = z"!, 那么 
2Zv~z/nm, 只 要 p< 


10. 


1 


12. 


13. 


14. 


15. 
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(推广 ) 如 果 亏 二 G 克 z( 其 中 G 是 一 个 在 有 限 区 间 上 有 限 的 测度 )， 那么 也 有 Za: = 


GZ. 对 于 G(z) = z"(a > 0), 证 明 ， 
如 果 z(z) ~ z* ,那么 Z(z) ~ 2*/(ap)- 


， (与 11.3 节 定理 2 有 关 的 结果 ). 用 所 表示 F"* 的 密度 , 令吉 =v 一 了 一 … 一 方 . 证 


明 : 如 果 所 是 有 界 的 , 那么 v(z) 一 1/p. 特别 地 , 如 果 了 一 0, 那么 一 1/ 


.如 果 F2* 有 直接 可 积 的 密度 , 那么 V =U 一 1 一 下 的 密度 v 趋 于 1/p. 
.利用 (4.4) 证 明 : 2(t) = V(t) 一 V(t 一 hh) 满足 带 有 z(t) = Fo(t) - Folt 一 hh) 的 标准 更 


新 方程 . 直接 由 更 新 方程 证 明 : V(t) 一 V(t 一 h) = h/p. 
剩余 的 等 待 时 间 和 已 度 过 的 等 待 时 间 的 联合 分 布 .利用 记号 (4.7) 来 证 明 : 当 t 一 oo 
时 P{t — Sm >zsmn-t> 一 成 广 [1 ~ F(s)Jds. 
PJsty 

(提示 : 对 左边 推导 一 个 更 新 方程 . ) 
稳 太 性质 , 考虑 具有 (4.6) 给 出 的 初始 分 布 Fo 的 延迟 了 的 更 新 过 程 . 在 + 和 t+# 之 间 
出 现 更 新 时 刻 Sn 的 概率 H(t,&) 满足 更 新 方程 

H(t,é) = Folt + €) — Folt) + Fo H(t,€). 
不 利用 计算 而 证 明 : H(t,€) = Fob(t). 
最 大 的 观察 奉命 . 在 标准 常 返 更 新 过 程 中 , 令 V(t,&) 是 直到 时 刻 t 观 察 到 的 到 达 时 刻 
的 最 大 间隔 的 长 度 > & 的 概率 . 证 明 ， 

Yee=1-FO+ Ve-w ray). 
讨论 这 个 解 的 特性 
对 于 11.5 节 中 定义 的 更 新 时 刻 的 个 数 Ne, 证 明 : 

E(N?) = DO(2k + 1)F**(t) = 2UKU(t) — Ut). 
ped 
由 上 式 和 更 新 方程 利用 分 部 积分 法 证 明 ， 
+ 2 
E(N?)= 2/ U(z)dz+ 2 + 0(#), 


从 而 根据 中 心 极限 定理 的 估计 有 Var(N:) ~ (c?/Hna)#，( 注 . 这 个 方法 也 适用 于 算术 分 
布 , 并 且 比 第 1 卷 13.12 节 的 习题 23 中 所 述 的 同一 结果 的 推导 更 可 取 . ) 

如 果 FF 是 一 个 正常 分 布 , a 是 一 个 常数 , 那么 可 以 把 积 微分 方程 2' = aZ - aZ 太 已 化 
成 Z(t) = 2(0)+a fi 2(t 2) — F(z)jdz. 

广义 的 II 型 计数 器 . 要 进入 计数 器 的 质点 构成 一 个 泊 松 过 程 . 第 j 个 到 达 的 质点 使 计数 
器 关闭 一 段 时 间 T;, 并 消除 它 前 面 的 质点 的 后 效 (如 果 有 的 话 ) 也 是 彼此 独立 的 , 且 
与 那个 泊 松 过 程 独立 , T; 还 有 共同 的 分 布 G. 如 果 Y 是 一 个 关闭 时 间 间 隔 的 长 度 , 且 
Z(t) = P{Y > 如 , 证 明 : Y 是 一 个 正常 变量 , 且 


2 =[1 -Ge + / ‘Z(t 5).0 Glnlze-endr， 


证 明 : 为 使 这 个 更 新 过 程 是 可 终止 的 , 当 且 仅 当 G 的 期 望 上 < a-:!. 讨论 11.6 节 的 渐 
近 估计 的 适用 性 . 
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16. 


了 


18. 


19. 


交通 安全 和 岛 的 作用 . [11.7 节 例 (b)] 双向 的 交通 流 在 两 条 独立 的 单行 车 道上 运动 , 相当 
于 两 个 具有 相等 密度 的 泊 松 过 程 . 为 了 实现 穿 过 行车 道 所 需要 的 平均 时 间 是 26, 把 公 
式 (7.10) 做 这 一 改变 后 就 可 应 用 . 但 是 交通 安全 岛 有 这 样 的 作用 , 即 总 的 穿 过 车 道 的 
时 间 是 两 个 有 由 (7.10) 给 出 的 期 望 与 方差 的 独立 变量 之 和 . 讨论 实际 的 作用 . 

质点 到 达 计数 器 的 时 刻 构成 一 个 分 布 为 F 的 常 返 更 新 过 程 . 在 每 次 记录 后 计数 器 关闭 
一 段 时 间 , 这 段 时 间 有 固定 的 长 度 6, 且 在 这 期 间 到 达 的 所 有 质点 都 不 起 作用 . 证 明 ， 
从 关闭 期 的 末尾 到 下 一 次 质点 到 达 的 时 间 的 分 布 为 


| rE- -Pea 


如 果 FF 是 指数 分 布 , 那么 这 个 分 布 也 是 指数 分 布 . 

非 线性 更 新 . 一 个 粒子 的 寿命 服从 一 指数 分 布 , 在 它 的 寿命 终止 时 , 它 产生 大 个 以 同样 
方式 进行 的 独立 复制 品 的 概率 为 pe(k = 0,1,2,…). 整个 过 程 在 t 前 停止 的 概率 F(t) 
满足 方程 


FO) =pol1 ~e-°) + Spe [ a oo) p(s)ds. 
k=1 o 


(处 理 这 样 的 方程 没有 一 般 的 方法 . ) 
设 下 是 R' 上 的 任 一 分 布 , 其 期 望 4 > 0， 有 限 二 阶 矩 为 m:. 证 明 
二 Po- 于 一 让， 


n=0 


其 中 z+ 照例 表示 z 的 正 部 . 提示 : 如 果 2(t) 表示 左边 , 那么 2 满足 更 新 方程 ,其 中 
站 yd 
二 /Peart < 0,z(z) = 3 人 (1— F(z))dz,t > 0. 


BR? 中 的 更 新 定理 . 设 对 侦 (X,Y) 的 分 布 集中 于 第 一 象限 内 . 设 工 是 区 间 0 < z,y < 1 


对 于 任 一 向 量 a, 用 工 +a 表示 把 平移 a 后 所 得 的 区 间 . 11.9 节 引 理 1 可 推广 如 下 . 
对 于 任何 固定 向 量 a 和 6b, 当 t 一 o0 时 ， 


U{I+at+tb}— UI{I+tb} 一 0. 


(a) 如 果 认 为 这 当然 成 立 , 证 明 : 边缘 分 布 的 更 新 定理 蕴含 U{I + 地 } 一 0. 
(b) 证 明 : 引 理 的 证 明 可 以 照搬 过 来 . 


@ 最 近 , P. J. Bickel 和 J. A. Yahav[Renewal theory in the plane, Ann. Math. Statist., vol. 


36(1965) pp，946-955] 给 出 了 平面 上 的 更 新 定理 的 一 个 更 恰当 的 阐述 ， 他 们 考虑 在 半径 为 " 和 
7 十 a 的 加 之 问 的 区 域 中 逗留 的 平均 次 数 并 令 r 一 oo- 
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本 章 讨论 随机 游 动 的 问题 , 强调 组 合 方法 和 阶梯 变量 的 系统 应 用 . 某 些 结果 将 
在 第 18 章 中 用 健 里 叶 方法 重新 推导 并 加 以 扩充 (随机 游 动 的 其 他 方面 已 包括 在 
6.10 节 中 了 ) 我 们 的 注意 力 基本 上 局 限于 两 个 中 心 课题 . 第 1 个 课题 是 证 明 在 第 1 
卷 第 3 章 中 对 掷 硬币 的 起 伏 推导 出 的 奇妙 的 结果 , 对 更 一 般 的 情况 也 成 立 , 而 且 实 
质 上 可 用 同样 的 方法 来 推导 . 第 2 个 课题 与 首次 通过 和 破产 问题 有 关 . 现在 流行 的 
是 把 这 些 课题 和 著名 的 维 纳 - 霍 普 夫 (Wiener Hopf) 理论 联系 起 来 进行 讨论 , 但 是 
这 种 联系 并 不 十 分 密切 . 我 们 将 在 12.3 节 和 18.4 节 中 讨论 它们 的 联系 . 

斯 帕 里 . 安德森 (E. Sparre Andersen)1949 年 关于 组 合 方法 在 起 伏 理 论 中 的 威 
力 的 发 现 , 为 整个 随机 游 动 理论 提供 了 新 的 方法 ， 从 那 时 起 ,发展 是 极其 迅速 的 ， 
随机 游 动 和 排队 问题 之 间 的 密切 联系 ?的 意外 发 现 也 促进 了 随机 游 动 理论 的 发 展 . 

这 方面 的 文献 浩如烟海 ， 令 人 眼花 练 乱 . 本 章 所 介绍 的 理论 相当 初等 和 简单 ， 
初学 者 无 法 想象 在 理解 这 些 问题 的 自然 背景 之 前 它们 会 有 多 么 困难 . 例如 ,12.5 节 
的 初等 渐 近 估计 包括 许多 以 前 用 高 深 的 方法 花费 了 很 大 气力 才 得 到 的 实际 结果 . 

12.6 节 ~12.8 节 几 乎 和 第 一 部 分 无 关 . 毫 无 疑问 ,我 们 的 论述 是 片面 的 ,忽视 - 
了 随机 游 动 的 一 些 有 趣 的 方面 ， 比 如 它 与 位 势 论 及 群 论 的 联系 .9 


12.1 基本 的 概念 与 记号 


在 本 章 中 Xi，X2,，… 是 独立 随机 变量 , 具有 不 集中 于 半 轴 上 的 共同 分 布 F. 
[对 于 满足 F(0) = 0 或 (0) = 1 的 分 布 , 这 个 课题 已 被 更 新 理论 所 包含 . ] 导出 随 
机 游 动 是 随机 变量 序列 


So = 0 Sn = Xi1+ + Xn. (1.1) 


有 时 我 们 考虑 给 定 序列 {Xj} 的 截 段 (Xj+1,…, Xi), 它 的 部 分 和 0, Sy+1 一 9),…， 
8k 一 5 称 为 这 个 随机 游 动 的 截 段 . 按 通常 的 方式 把 下 标 作为 时 间 参数 处 理 . 于 是 ， 
@ 第 一 个 这 样 的 联系 似乎 是 D. V. 林 德 莱 在 1952 年 指出 的 . 他 推导 出 了 一 个 积分 方程 ,此 方程 现在 
看 来 是 Wiener-Hopf 型 的 . 
@ 关于 其 他 方面 见 斯 皮 策 尔 的 书 (1964), 虽然 这 本 书局 限于 讨论 算术 分 布 . 关于 可 适用 于 高 维 情形 的 
组 全 方法 , 见 C. Hobby and R. Pyke, Combinatorial results in multidimensional fluctuation 
theory, Ann. Math. Statist., vol. 34(1963)pp. 402-404. 
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时 刻 ”把 整个 随机 游 动 分 成 一 个 前 截 段 和 一 个 剩余 截 段 . 由 于 So = 0, 所 以 随机 游 
动 从 原点 开始 . 所 有 的 各 项 都 加 上 一 个 常数 a, 我 们 就 得 到 一 个 从 a 开始 的 随机 游 
动 . 因此 , 5n, Sn+l,… 是 由 下 导出 的 从 Sn 开始 的 随机 游 动 . 
概论 ”考虑 随机 游 动 的 图 形 ， 我们 将 会 注意 到 Sn 达到 纪录 值 的 诸 点 , 即 Sn 大 
于 所 有 以 前 达到 的 值 50,…, Sn-i 的 点 . 按照 6.8 节 引 入 的 术语 , 这 些 点 是 阶梯 点 . 
( 见 6.8 节 的 图 6-1. ) 阶梯 点 的 理论 上 的 重要 性 可 由 下 列 事实 看 出 : 它们 之 间 的 截 
段 是 彼此 的 概率 复制 品 ， 因 此 通过 研究 第 一 个 阶梯 点 可 以 得 出 一 些 关 于 随机 游 动 
的 重要 结论 . 

在 第 1 卷 中 , 我 们 曾 反复 地 研究 了 这 样 的 随机 游 动 , 使 得 Xk 分 别 以 概率 p 和 
4 取 值 +1 和 -1. 在 这 样 的 随机 游 动 中 , 每 个 记录 值 比 前 一 个 记录 值 大 1, 依次 的 
阶梯 点 只 不 过 是 首次 通过 1,2,… 的 点 . 用 现在 的 术语 ， 我 们 可 以 说 ， 阶 梯 高 度 是 
预先 知道 的 , 只 需要 研究 相 邻 的 阶梯 点 之 间 的 等 待 时 间 . 这 些 等 待 时 间 是 独立 随机 
变 基 ,其 分 布 和 首次 通过 +1 的 等 待 时 间 的 分 布 相同 . 第 1 卷 11.3 节 (3.6) 求 出 了 
这 个 分 布 的 母 函 数 , 它 由 下 式 给 出 : 


1 ~ V1- 4pgs’]/(2gs), (1.2) 


其 中 一 表示 正 根 亦 见 第 1 卷 14.4 节 ; 关于 显 式 见 第 1 卷 11.3 节 (d) 和 第 1 卷 
14.5 节 ]. 当 p < gq 时 , 首次 通过 时 间 是 亏损 随机 变量 , 因为 取 正 值 的 概率 等 于 p/q. 

在 达到 新 纪录 值 前 , 同一 纪录 值 可 以 重复 几 次 , 这 种 达到 相对 最 大 值 的 点 称 为 
弱 阶 梯 点 ，[ 在 简单 的 二 项 随机 游 动 中 ， 第 一 个 弱 阶梯 点 或 者 是 (1,1), 或 者 是 形 如 
(27,0) 的 点 . ] 

在 这 些 开场 白 之 后 , 我 们 正式 引入 阶梯 变 基 , 这 部 分 地 重复 了 6.8 节 中 的 内 容 . 
定义 依赖 于 一 个 不 等 式 ， 从 而 存在 4 种 相应 于 四 个 可 能 性 <, <, >, > 的 阶梯 变量 . 
这 就 导致 用 显然 的 术语 , 即 上 升 阶梯 变量 和 下 降 阶 梯 变 量 , 严格 阶梯 变量 和 弱 阶 梯 
变量 , 来 描述 双重 的 分 类 . 上 升 变量 和 下 降 变量 与 加 和 减 、 或 者 最 大 值 与 最 小 值 之 
间 的 熟知 的 对 称 性 有 关 . 但 是 严格 变量 和 弱 变量 之 间 的 差别 给 叙述 和 记号 带 来 了 困 
难 . 最 简单 的 办 法 显然 是 只 考虑 连续 的 分 布 已, 因为 这 时 严格 变量 与 弱 变 量 以 概率 
1 相同 . 建议 初学 者 这 样 做 ， 对 严格 变量 和 弱 变 量 不 加 区 分 ,但 是 对 于 一 般 的 理论 
以 及 像 撕 硬 币 游戏 这 样 的 例子 , 这 种 区 别 是 不 可 避免 的 . 

为 了 引入 必要 的 记号 和 约定 , 我 们 考虑 严格 上 升 阶梯 变量 . 我 们 将 证 明 ， 弱 阶 
梯 变量 的 理论 可 作为 严格 阶梯 变量 理论 的 简单 推论 而 得 到 .下降 阶梯 变量 不 需要 
新 的 理论 . 因此 , 我 们 将 取 严格 上 升 变量 作为 典型 变量 . 在 没有 发 生 混淆 的 危险 时 ， 
我 们 将 省 去 限制 词 “ 上 升 ” 和 “严格 ”. 
严格 上 升 阶梯 变量 ”对 n = 1,2,…( 不 包括 原点 ) 考虑 点 列 (n, Sn). 第 一 个 严格 上 
升 阶梯 点 (及, 因 ) 是 这 个 序列 中 第 一 个 使 Sn > 0 的 项 . 换 句 话说 ， 抽 是 首次 进入 
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(严格 ) 正 半 轴 的 时 刻 ,定义 为 
{=n}={51 <0,…,Sn-1 <0,5n > 0}, (1.3) 


且 = 5g. 变量 页 称 为 第 一 个 阶梯 时 刻 ， 2 称 为 第 一 个 阶梯 高 度 . 如 果 事 件 
(1.3) 不 发 生 , 那么 这 两 个 变量 就 无 法 定义 ,从 而 它们 都 可 能 是 亏损 变量 . 9 
关于 (五 ,. 冶 ) 的 联合 分 布 , 我 们 记 


P{F =n, A < 1} = Hn(z). (1.4) 
边缘 分 布 为 

P{% =n}= Hn(00),， n=1,2,.…, (1.5) 

P{a4 < 4} = SH,(s) = Ho) (16) 


n=1 


这 两 个 变 基 有 相同 的 气量 , 即 1 - H(o0) > 0. 
紧 接 在 第 一 个 阶梯 时 刻 后 的 随机 游 动 的 截 段 是 整个 随机 游 动 的 概率 复制 品 . 它 
的 第 一 个 阶梯 点 是 整个 随机 游 动 的 第 二 个 阶梯 点 , 它 具 有 下 列 性 质 ， 


Sn > 50, ,Sn > Sn-_1, (1.7) 


它 称 为 整个 随机 游 动 的 第 二 个 阶梯 点 . 它 具 有 (机 + 免 ,. 冶 +, 鸡 ) 的 形式 ,其 中 对 
偶 ( 丈 , 阁 ) 和 ( 免 ,. 略 ) 是 独立 同 分 布 的 . ( 亦 见 6.8 节 ) 照 此 继续 下 去 我 们 可 以 定 
义 这 个 随机 游 动 的 第 3,4, … 个 阶梯 点 . 因此 ， 点 (mn, Sm) 是 一 个 上 升 阶梯 点 ， 如 果 
它 满足 (1.7). 第 7 个 阶梯 点 (如 果 它 存在 ) 具有 (及 十 … 十 到 ,站 十 … 十 6) 的 形 
式 , 其 中 对 偶 (和 所 ,. 敌 ) 是 相互 独立 的 , 具有 共同 分 布 (1.4). ( 见 6.8 节 中 的 图 6-1. ) 
为 了 节省 记号 , 我 们 对 于 和 朋 十 … 十 汉 与 痊 十 … 十 6 不 引入 新 的 字母 . 
它们 形成 “到 达 时 刻 的 间隔 "为 中 和 .类 的 (可 能 是 可 终止 的 ) 更 新 过 程 . 当然 , 在 
随机 游 动 中 只 有 和 所 才 具 有 时 间 变 量 的 性 质 . 阶梯 点 本 身 形成 一 个 二 维 更 新 过 程 . 
我 们 用 
p= DH"™ (1.8) 
n=0 
表示 阶梯 高 度 过 程 的 更 新 测度 . (此 处 百 "* = wo. ) 它 的 非 正 常 分 布 函数 为 %(z) = 
W{00,Z}. wz) 当 z<0 时 等 于 0; 当 z > 0 时 , W(z) 等 于 1 加 上 带 形 GiE 中 阶梯 点 


@ 习题 3~ 习题 6 提供 了 不 了 解 一 般 理 论 就 可 以 理解 的 说 明 性 练习 . 
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的 期 望 个 数 (时 间 不 限 ) 我 们 从 6.6 节 和 11.1 节 中 知道 , 对 于 所 有 的 z,%(z) < co， 
并 且 在 亏损 的 阶梯 变量 的 情形 下 ， 


Wl00) = 》 再 "(co) = (1.9) 
n=0 


1 
1 一 五 (co) 


最 后 , 我 们 对 在 原点 上 具有 单位 质量 的 原子 型 分 布 引入 记号 wo. 因此, 对 任 一 


区 间 了 7， 
1， 如 果 0 € 了 
wolD) = { 0， 否则 . (1.10) 

弱 上 升 阶梯 变量 为 使 点 (n, Sn) 是 弱 (上 升 ) 阶梯 点 , 当 且 仅 当 对 于 = 0,1,…,n， 
Sn > Sk 严格 阶梯 变量 和 弱 阶 梯 变 量 的 理论 大 体 上 是 平行 的 我们 将 故意 地 使 用 
相同 的 字母 , 用 横 线 表示 弱 变 量 : 于 是 多 1 是 使 得 S; <0,…,Sn-1<0, 但 Sn>0 
的 最 小 指标 n. 如 前 所 述 , 当 分 布 F 连续 的 时 候 , 严格 变量 和 弱 变 量 之 间 的 乏味 的 
区 别 就 是 不 必要 的 了 . 即使 在 一 般 情形 下 ,也 容易 用 分 布 五 来 表示 弱 阶 梯 高 度 的 
分 布 瑟 , 这 样 我 们 可 以 把 注意 力 集中 于 (1.6) 所 定义 的 唯一 分 布 上 . 

第 一 个 弱 阶 梯 点 和 第 一 个 严格 阶梯 点 等 同 ， 除 了 随机 游 动 在 返回 原点 前 只 取 
负 值 的 情形 外 . 在 这 种 情形 下 , .了 21 = 0, 我 们 令 4 = P{3: = 0}. 因此 


6= DP{S! <0,, Sn-1 <0,5n =0}). (1D) 
n=1 


(如 果 X1 > 0, 那么 这 个 事件 就 不 可 能 发 生 , 从 而 0 < < 1. ) 第 一 个 严格 阶梯 点 
以 概率 1 -4 与 第 一 个 弱 阶 梯 点 重合 , 因此 


互 = wo+(1 -OH. (1.12) 


用 文字 说 明 就 是 : 第 1 个 弱 阶梯 高 度 的 分 布 是 分 布 H 和 集中 于 原点 上 的 原子 型 分 
布 的 混合 分 布 . 
例 在 简单 的 二 项 随机 游 动 中 , 为 使 第 1 个 弱 阶 梯 高 度 等 于 1, 当 且 仅 当 它 的 第 1 
步 到 达 +1. 如 果 第 1 步 到 达 -1, 那么 返回 0 的 (条 件 ) 概率 当 p > 4 时 等 于 1, 当 
P< 4 时 等 于 p/gq. 在 第 1 种 情形 下 4 = g, 在 第 2 种 情形 下 5 = p. 可 能 的 阶梯 高 度 
是 1 和 0, 当 p< gq 时 , 它们 的 概率 是 P 和 9; 当 p<g 时 , 两 者 的 概率 都 等 于 p. 在 
后 一 情形 下 , 阶梯 高 度 是 亏损 变量 . > 
在 首次 进入 0,06 前 随机 游 动 愉 有 大 次 返回 原点 的 概率 等 于 4*(1 - 6). 这 种 返 
回 的 平均 次 数 是 1/(1 - 6), 这 也 是 在 下 一 个 严格 阶梯 点 出 现 之 前 每 个 弱 阶 梯 高 度 
出 现 的 平均 次 数 . 因此 ly 


$= 这 (1.13) 
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(见习 题 7) 这 些 关系 式 的 简单 性 使 我 们 可 以 避免 明显 地 利用 分 布 豆 . 
下 降 阶梯 变量 。 严格 下 降 阶 梯 变 量 和 弱 下 降 阶 梯 变 量 可 以 利用 对 称 性 , 即 把 > 变 
成 < 来 定义 . 在 需要 特殊 记号 的 个 别 情况 下 , 我 们 用 上 标 负 号 来 表示 下 降 情 形 . 于 
是 第 1 个 严格 下 降 阶 梯 点 是 (到 ,和 ) 等 等 . 

立即 可 以 看 出 , 概率 P{W = 0} 和 P{. 尖 1 = 0} 是 恒 等 的 , 因为 


P{S1 >0,..., Sn_1 > 0, Sn = 0} 
=P{S1 <0,.…,Sn_1 < 0, Sn = 0}. (1.14) 


由 此 推出 下 降 阶 梯 变 量 的 类 似 于 (1.12) 和 (1.13) 的 公式 依赖 于 同一 个 量 C. 


12.2 ”对 侦 性 , 随机 游 动 的 类 型 


在 第 1 卷 第 3 章 中 利用 简单 的 组 合 论证 推导 出 了 掷 硬币 的 起 伏 的 惊人 的 性 质 ， 
这 种 论证 依赖 于 把 变量 (Xi,……,Xn) 排 成 相反 次 序 . 同样 的 方法 可 导致 更 一 般 的 重 
要 结果 . 

对 于 固定 的 n, 我 们 引入 n 个 新 的 变量 XY = Xn,…,X% = X1. 它们 的 部 分 和 
为 碟 = 5n 一 Sn-k, 其 中 =0,1,…,n.(S0,…,S5n) 与 (58,…,S%) 的 联合 分 布 是 
相同 的 , 对 应 关系 Xx 一 多 把 任 一 用 (So,… ,Sn) 定义 的 事件 4 映 成 具有 相同 概 
率 的 事件 4* 这 种 映射 是 很 容易 想象 出 来 的 ， 因 为 (0, 51,…, Sn) 的 图 形 可 以 通过 
把 (0, SY,…, 5S;) 的 图 形 旋转 180° 得 到 , 反之 亦 然 . 
例 (a) 如 果 51<0,…,5n-1<0 但 5, =0, 那么 


Si >0,.…,S»_1>0, 且 S»=0. 


这 就 证 明了 上 节 所 用 的 关系 式 (1.14) 的 正确 性 . > 

我 们 现在 把 逆转 程序 应 用 于 定义 (严格 上 升 ) 阶梯 点 的 事件 Sn > 50,… ,Sn > 
Sn-1. 对 偶 关系 式 是 5; > 5*_k,k = 1,2,…n. 但 是 , S* > S* 与 Sk > 0 是 相同 
的 事件 , 从 而 对 于 任 一 有 限 区 间 TC 0,05, 我 们 有 


P{Sn > 5;,7=0,.…,n—1, 有 Sn € I} 
= 了 P{Si > 0j=1……n 且 Se 1T}. (2.1) 


左边 是 “存在 横 坐 标 为 n 纵 坐标 在 工 中 的 阶梯 点 ”的 概率 . 右边 是 “在 时 刻 n 时 进 
入 工 而 在 时 刻 n 之 前 没有 到 达 闭 半 直线 -co,6 "这 个 事件 的 概率 . 

其 次 , 我 们 考虑 把 (2.1) 对 所 有 的 n 求 和 得 到 的 结果 . 根据 更 新 测度 的 定义 
(1.8), 我 们 在 左边 得 到 的 是 y{ 了 }， 在 右边 我 们 得 到 的 是 “首次 进入 ~oo,0 之 前 
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在 区 间 了 中 逗留 的 期 望 次 数 ”. 它 是 有 限 的 , 因为 V{1} < oo. 因此 , 我 们 证 明了 基 
本 的 
对 偶 性 引 理 ”更 新 测度 有 两 种 解释 . 对 每 个 有 限 区 间 工 C 0;00, 值 W{ 了 } 等 于 

(a) 7 中 阶梯 点 的 期 望 个 数 ; 

(b) 首次 进入 -00,0 之 前 在 T 中 运 留 的 期 望 次 数 . 

这 个 简单 的 引 理 使 我 们 可 以 用 初等 方法 来 证 明 一 些 定理 ， 如 果 不 利用 这 个 引 
理 , 要 证 明 这 些 定理 就 需要 用 高 深 的 分 析 方 法 . 从 它 的 分 析 描 述 中 很 难看 出 这 个 引 
理 有 什么 特别 的 地 方 , 但 是 它 有 一 些 最 意 想不到 的 、 与 直觉 不 符 的 直接 推论 . 

例 (b) ”简单 的 随机 游 动 . 在 12.1 节 的 例子 中 的 随机 游 动 中 ,存在 一 个 纵 坐标 为 
的 阶梯 点 的 充 要 条 件 , 是 事件 {5 = 上} 对 某 个 发 生 . 我 们 看 到 , 根据 p> 9 或 
p < q, 这 个 事件 的 概率 等 于 1 或 (p/q)*. 根据 对 偶 性 引 理 ， 这 就 是 说 ， 在 对 称 随机 
游 动 中 ,对 所 有 的 人 > 1， 首 次 返回 原点 之 前 在 k 上 运 留 的 期 望 次 数 都 等 于 1. 这 个 
结果 的 奇异 特性 用 拌 硬币 的 术语 来 说 似乎 更 清楚 . 结果 是 : 平均 说 来 ， 不 管 k 多 么 
大 ， 在 首次 到 达 0 之 前 , 彼得 (Peter) 的 累积 赢利 只 经 过 每 个 值 k 一 次 . 这 个 结论 通 
常会 引起 怀疑 , 但 是 可 以 用 直接 计算 来 验证 它 (习题 2). (为 首次 返回 0 所 需要 的 等 
待 时 间 的 期 望 为 无 穷 , 这 一 已 知 结果 可 以 通过 对 上 求 和 得 到 .) > 

在 对 称 的 二 项 随机 游 动 ( 掷 硬币 ) 中 , 达到 +1 的 概率 是 1( 达 到 -1 的 概率 也 
是 D, 但 是 每 个 这 样 的 事件 的 平均 等 待 时 间 是 无 穷 的 . 下 一 定理 说 明 这 并 不 是 据 硬 
币 游戏 所 特有 的 ， 因 为 类 似 的 结论 对 所 有 的 取 正 值 和 负 值 的 概率 都 为 1 的 随机 游 
动 都 正确 . 
定理 1 只 存在 2 种 类 型 的 随机 游 动 . 

(振动 型 .上 升 更 新 过 程 和 下 降 更 新 过 程 都 是 常 返 的 ,Sn 以 概率 1 在 -00 和 oo 之 
闻 振 动 ， 并 且 

E( 页 ) = oo， E( 8 ) = oo. (2.2) 


(让 趋向 -oo( 比 如 说 ). 上 升 更 新 过 程 可 终止 更 新 过 程 ， 下降 更 新 过 程 是 正常 更 
新 过 程 . Sn 以 概率 1 趋向 -oo 并 达到 一 个 有 限 的 最 大 值 M > 0. 关系 式 (2.5) 和 (2.7) 都 
成 立 . 

[Gi) 型 的 随机 游 动 显然 是 瞬时 的 ， 但 是 (i) 型 随机 游 动 既 包 括 常 返 随 机 游 动 ， 
也 包括 瞬时 随机 游 动 . 见 6.10 节 的 末尾 . ] 
证 ” 当 把 严格 不 等 式 换 成 弱 不 等 式 时 , 恒等式 (2.1) 也 成 立 . 对 于 了 工 = 下 co,， 它 化 
成 


P{Sn > Sk,k=0,1,.…,n} = P{Sx > 0,k=0,1,.….,n} 
=1-P{9 <n}. (2.3) 
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左边 是 (n, Sn) 为 弱 上 升 阶梯 点 的 概率 . 这 些 概率 相 加 等 于 W(co) < co， 因 此 由 
(1.13) 我 们 有 


Tw) = Dh P(A <) 24) 
n=0 


当下 降 阶梯 过 程 是 亏损 过 程 时 , 这 个 级 数 的 各 项 取 0 以 外 的 有 界 值 , 这 个 级 数 
是 发 散 的 . 在 这 种 情形 下 , %(co) = co, 此 式 表明 上 升 过 程 是 常 返 的 . 于 是 我 们 得 到 
下 述 这 个 直观 上 明显 的 事实 的 一 个 分 析 证 明 : 上 升 阶梯 过 程 和 下 降 阶梯 过 程 不 可 
能 都 是 终止 的 . 

如 果 多” 是 正常 的 , 那么 (2.4) 化 成 


EF) = Teo) = 


1 

(00 Ho)) 9 
当 到 (eo) =1 时 ,此 式 为 oo. 由 此 推出 ,为 使 (7-) < co, 当 且 仅 当 到 (oo) < 1 即 
当 上 且 仅 当 上 升 变 基 肥 是 亏损 变 车. 因此 ,或 者 这 些 变 量 之 一 是 亏损 的 ,或 者 (2.2) 
成 立 . 

如 果 E(Z-) < co， 那么 上 升 阶梯 过 程 是 可 终止 的 . 以 概率 1 存在 一 个 最 后 的 
阶梯 点 ， 因 此 

M = maxfSo, S51,.…-} (2.6) 

是 有 限 的 . 假定 第 m 个 阶梯 点 发 生 , 那么 它 是 最 后 一 个 阶梯 点 的 概率 等 于 1- Eco)， 
因此 [ 见 11.6 节 (6.3)]， 


P{M < z} =[1— H(00)] YH™(z) = — H(oo)]y(). (2.7)P 
n=0 
在 下 一 定理 中 我 们 约定 ， 如 果 定 义 积分 只 在 +oo 处 发 散 ， 等 价 地 说 ， 如 果 
P{X < 要 在 一 00,0 上 是 可 积 的 , 则 就 记 E(X) = +oo. 
定理 2 (i) 如 果 E(Xi) = 0, 那么 和 和 . 肌 是 正常 变量 ,并 且 E( 有 7) = oo. 
的 ) 如 果 忆 (X1) 是 一 有 限 正 值 ,， 那么. 冶 和 砚 是 正常 变量 ,它们 的 期 望 有 限 而 且 


E(34) = E(F)E(X1). (2.8) 
这 个 随机 游 动 趋向 十 oo. 有 
(ii) 如 果 E(Xa) = 十 oo0， 那么 E( 输 ) = o0, 并 且 这 个 随机 游 动 趋向 十 oo. 


(iv) 否则 ， 或 者 随机 游 动 越 向 -co( 在 这 种 情形 下 ， 驳 和 . 疾 是 亏损 的 )， 或 者 
E(24) = oo. 


@ 6.10 节 的 定理 4 包含 下 列 更 强 的 结果 ; 当 E(X1) = 0 时 , 随机 游 动 是 常 返 的 
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等 式 (2.8) 是 由 A. 瓦尔 德 在 更 一 般 的 背景 下 发 现 的 ,我 们 将 在 18.2 节 中 讨论 
这 个 更 一 般 的 背景 下 述 证 明 是 以 7.8 节 中 的 强大 数 定律 为 基础 的 . 纯 分 析 的 证 明 
将 在 适当 的 时 候 给 出 . ( 见 12.7 节 的 定理 3 和 习题 9~ 习题 11 及 18.4 节 .) 
证 ”如果 是 第 个 阶梯 时 刻 , 那么 我 们 有 恒等式 

Sn _ (++ MM)/k 

n (及 二 … 十 到)/k 


我 们 现在 注意 到 , 当 E(X1) = +oo 时 , 强大 数 定律 也 成 立 , 这 可 以 通过 明显 的 截 尾 
方法 看 出 . 

中 设 E(X1)=0. 当天 一 00 时, (2.9) 的 左边 趋 于 0. 由 此 推出 分 母 趋 于 无 穷 
这 比 含 页 是 正常 变量 , 且 BE( 责 ) = oo. 

(如果 0 < (Xi) < co, 那么 强大 数 定律 蕴含 随机 游 动 趋向 co. 由 (2.5), 这 
就 是 说 及 是 正常 变量 ,并且 E( 肥 ) < co. 因此 , (2.9) 中 的 分 子 和 分 母 都 趋 于 有 限 
极限 , 于 是 (2.8) 可 由 大 数 定律 之 逆 (7.8 节 中 的 定理 4) 推出 . 

( 道 ) 如 果 EE(X1) = +oo, 那么 用 同样 的 论证 可 以 证 明 E( 输 ) = oo. 

(iv) 在 其 余 的 情形 中 , 我 们 来 证 明 , 如 果 . 阁 是 正常 变 基 且 E(. 阁 ) < co, 那么 
随机 游 动 趋向 -oo. 考虑 随机 游 动 的 第 1 步 , 显然 有 , 对 2 > 0， 


(2.9) 


P{34 > z} > P{X1 > z}. (2.10) 


如 果 冶 是 非 正常 变量 , 那么 随机 游 动 趋向 -oo. 如 果 它 是 正常 变量 , 那么 左边 在 
D0,06 上 的 积分 等 于 E(. 因 ). 如 果 E( 笃 ) < co, 那么 E(X1) 是 有 限 的 或 -co, 我 们 
已 经 考虑 过 E(X1) > 0 的 情形 了 , 如果 E(X1) < 0( 或 等 于 一 00), 那么 随机 游 动 趋 
向 -o0. p 
由 (2.10) 和 关于 z < 0 的 类 似 的 不 等 式 可 推出 , 如 果 .6 和 6” 都 是 正常 变 
量 , 且 有 有 限 的 期 望 , 那么 P{|X1| > z} 是 可 积 的 , 从 而 E(X1) 存在 (5.6 节 的 引 理 
2). 当 E(X1) 关 0 时 , 2 个 阶梯 变量 之 一 是 亏损 的 , 因此 我 们 有 
票 ”如 果 . 敌 和 .3 部 是 正常 变量 且 有 有 限期 望 ,那么 E(X1) = 0. 
其 道 是 不 真 的 . 但 是 , 如 果 E(X1) = 0 且 E(X?) < oo, 那么 . 冶 和 . 阁 - 都 有 
有 限期 望 , (见习 题 10. 更 精确 的 结果 将 包含 在 18.5 节 的 定理 1 中 , 其 中 Sw 和 SN 
是 具有 分 布 G 和 . 冶 - 的 首次 进入 变量 . ) 
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阶梯 高 度 的 分 布 了 和 互 的 计算 乍 看 来 是 一 个 很 难 解决 的 问题 , 并 且 人 们 最 初 
就 是 这 样 认为 的 . 但 是 对 偶 性 引 理 可 导致 一 个 简单 的 解法 其 思想 是 , 应 把 首次 进 
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入 -co,0 和 在 首次 进入 之 前 的 随机 游 动 的 截 段 合 起 来 考虑 . 因此 , 我 们 来 研究 修改 
了 的 随机 游 动 {S"}, 这 个 随机 游 动 在 首次 进入 一 co;0 的 时 刻 终 止 . 我 们 用 wp 表示 
这 个 受 限制 的 随机 游 动 在 时 刻 n 时 的 位 置 的 亏损 概率 分 布 ， 即 对 于 任 一 区 间 了 和 
nn 二 1,2,…, 我 们 令 


pn{I} = P{S1 > 0,.…, Sn > 0, Sn € TT}. (3.1) 


(注意 , 这 蕴含 加 {一 00,0} = 0.} 与 以 前 一 样 , wo 是 集中 于 原点 上 的 概率 分 布 . (2.1) 
中 已 证 明 wn{ 了 } 等 于 “(mn, Sn) 是 使 得 Ss e 了 的 阶梯 点 " 的 概率 . 因此 , 对 n 求 和 ， 
我 们 得 到 


yD = wt{l), (82) 
n=0 


其 中 少 是 在 (1.8) 中 引入 的 更 新 函数 . 换 句 话说 , 对 于 开 正 半 轴 中 的 区 间 I,w{1} 
是 纵 坐 标 在 了 中 的 (严格 上 升 ) 阶梯 点 的 平均 个 数 ， 对 于 负 半 轴 中 的 I， 我 们 定 
义 W{I} = 0， 由 此 推出 ，(3.2) 中 的 级 数 对 于 每 个 有 限 区 间 了 都 收敛 (可 是 对 于 
I= 0,00 未 必 收 敛 ). 正 是 这 个 出 人 意料 的 结果 使 下 述 理论 变 得 非常 简单 

研究 首次 进入 二 co,0 就 是 研究 弱 下 降 阶梯 过 程 , 沿用 12.1 节 的 记号 , 首次 进入 
的 点 是 驰 1,， 它 的 分 布 是 互 . 但 是 为 了 便于 印刷 , 我 们 把 互 ” 换 成 p, 并 用 pn{7} 
表示 首次 进入 一 oo,0 发 生 在 时 刻 n 是 进入 点 在 区 间 了 内 的 概率 . 对 n= 1,2,…， 


pn{l} =P{S1 > 0,.…, Sn-1 > 0, Sn < 0, Sn € 1}. (3.3) 
(这 蕴含 pn {0, 00} = 0. po 这 一 项 没有 定义 . ) 这 一 次 级 数 
p{1}= Dpn{D} (3.4) 
n=1 


显然 收敛 且 表 示 首 次 进入 点 的 可 能 是 亏损 的 分 布 ，( 换 句 话说 , p{T} = 互 {了 }. ) 
很 容易 推导 出 ws 和 pn 的 递 推 关系 式 . 实际 上 , 给 定 Sn 的 位 置 y，Sn+i EI 
的 (条 件 ) 概率 等 于 F{I 一 y}, 其 中 工 -2 是 把 了 平移 -y 后 得 到 的 区 间 . 因此 ， 


prt 四 二 三 WtawyPU 一 贡 , 如 果 1 c -e006 (9.58) 
Ynn{D} = 人 i Yn{dy}F{I 一 引 , 如果 TC 0,0%% . (3.5b) 


( 仅 当 n=0 时 原点 才 起 作用 . ) 对 于 有 界 区 间 了 ,对偶 性 引 理 保证 了 于 加 {} 的 收 
敛 性 , 并 且 于 pn{7} 恒 收 敛 于 一 个 不 超过 1 的 数 . 于 是 我 们 得 到 了 p 和 的 级 数 
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表达 式 . 显然 , 这 些 和 式 满 足 


p= 人 wanPU- 四 如 时 Tc 二 8 Ga 
y= 人 wamPU- 由 如 果 Tc De ， (3.6b) 


但 必须 说 明 ,，(3.6b) 只 对 有 限 区 间 了 成 立 . 我 们 将 看 出 , (3.6) 比 p 和 少 的 理论 上 的 
级 数 表达 式 更 有 用 . 有 时 把 区 间 函数 和博 换 成 等 价 的 点 函数 
ol) =p {00,2}, wz) = {00,2} 
较 方便 . 显然 (3.6a) 等 价 于 
oD= 三 want 及， <0 (3.78) 
必 
由 (3.6b) 我 们 得 到 ,对 z > 0， 
v=1+v0 =1+ /warir(e -WD) -FC 
因此 , 考虑 到 (3.7a), 我 们 可 知 (3.6a) 等 价 于 
wa) =1-p0+ [vawrle-w), «>0. Ga.7b) 
为 了 简化 记号 , 我 们 引入 卷 各 


由 太太 二 》 wn 六 下 (3.8) 


n=0 


因为 少 集中 于 0,00 上 , 所 以 值 FPF{1} 等 于 (3.6) 中 两 个 积分 之 和 ， 从 而 是 有 
限 的 . 当 % 在 原点 上 有 单位 原子 时 , 我 们 可 以 把 (3.6) 中 的 两 个 关系 式 合成 一 个 卷 
积 方程 

Pp 十 力 二 十 业 克 本 (3.9) 


由 于 p 和 少 一 wo 分 别 集中 于 -oo0,0 和 “0,00 上 ， 所 以 关系 式 (3.9) 完全 等 价 于 
(3.6) 中 的 两 个 关系 式 . 

我 们 将 把 (3.9) 作为 一 个 确定 未 知 测度 p 和 4 的 积分 方程 . 从 (3.9) 可 以 推导 
出 很 多 在 理论 上 很 重要 的 结论 ， 我 们 在 例子 的 标题 下 列 出 这 样 的 结论 中 最 值得 注 
意 的 定理 ,以 表示 以 后 用 不 到 这 些 定理 , 以 及 我 们 进行 的 讨论 离开 了 主题 . 
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例 (a) 维 纳 - 霍 普 夫 型 因子 分 解 . 由 少 的 定义 (1.7) 可 推出 它 满足 更 新 方程 


荡 一 加 十 二 瓦 (3.10) 
利用 这 个 关系 式 , 我 们 来 证 明 ，(3.9) 可 以 改写 成 等 价 形 式 
F=H+p— Hp. (3.11) 


事实 上 , 取 (3.9) 和 五 的 卷 积 , 我 们 得 到 
HRP+Y -Wo=H-F+yF. 
从 (3.9) 中 减 去 上 式 得 (3.11). 反之 , 取 (3.11) 和 的 卷 积 , 得 到 
VF =Y— bot+yYp 一 (VY— Wo)Np = VY— Yotp, 

这 和 (3.9) 相同 . 

恒等式 (3.11) 用 2 个 分 别 集中 于 0,co 和 -co,0 上 的 (可 能 是 亏损 的 ) 分 布 及 
和 p 来 表示 一 个 任意 的 概率 分 布 ,因而 它 是 值得 注意 的 . 第 1 个 区 间 是 开 的 , 第 
2 个 区 间 是 闭 的 , 但 是 可 以 用 首次 进入 一 00,0 的 概率 万- 表示 首次 进入 一 00,0 的 
概率 p, 以 消除 这 种 不 对 称 性 . 这 些 概率 之 间 的 关系 式 可 以 用 类 似 于 z < 0 时 (1.12) 
的 关系 式 给 出 , 即 

p=%ot+(1- OH", 

其 中 5 由 (1.11) 确定 [(1.11) 对 z > 0 也 成 立 , 见 12.2 节 例 (a)]. 代入 (3.11), 经 过 
明显 的 重 排 后 , 我 们 得 到 


Wo—F=(1- Co — HI — HT. (3.12) 


当然 , 对 于 连续 分 布 ,关系 式 (3.11) 和 (3.12) 是 一 样 的 . 

已 经 用 不 同 的 办 法 独立 地 发 现 了 这 个 公式 的 各 种 不 同形 式 , 而 且 它 们 引起 了 
很 大 的 缀 动 . 关于 一 个 不 同 的 形式 见习 题 19,， 关 于 它 的 储 里 叶 分 析 的 等 价 形式 见 
18.3 节 . 与 维 纳 - 霍 普 夫 技巧 的 联系 将 在 12.3 节 中 讨论 . 瓦尔 德 恒等式 是 (3.11) 的 
简单 推论 . (见习 题 11 及 18.2 节 ) 

例 (b) ”通常 很 难 求 出 甩 和 互 - 的 明显 表达 式 . 在 6.8 节 例 (b) 中 找到 了 一 个 有 
趣 的 分 布 ， 对 它 的 计算 特别 简单 . 如 果 斑 是 两 个 分 别 集中 于 056 和 -00,0 上 的 
指数 分 布 的 卷 积 , 那么 它 的 密度 具有 形式 
ab 
pr pe <0 
ab 
a+b 


f(z) 


人 
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我 们 假设 b< a, 从 而 E(X) > 0. 于 是 互生- 的 密度 分 别 为 be-o 和 be**, 这 里 
五 太 昌 -= (b/a)F, (3.11) 显然 成 立 . [a 
(关于 其 他 例子 见习 题 9. ) 

我 们 现在 来 讨论 作为 未 知 测度 p 和 的 积分 方程 的 (3.9). 我 们 将 证 明 解 是 唯 
一 的 . 为 了 简便 起 见 ,我 们 约定 : 如 果 p 是 一 个 集中 于 oo,0 上 的 可 能 是 亏损 的 概 
率 分 布 , 光一 如 是 这 样 的 一 个 集中 于 0,00 上 的 测度 , 使 得 对 每 个 有 界 区 间 7, 测 
度 w{I+ 相 是 有 界 的 , 那么 就 称 对 偶 (P, 切 在 概率 上 是 可 能 的 . (最 后 一 个 条 件 可 由 
更 新 定理 推出 , 因为 少 = 省"*. ) 
定理 1 卷 积 方程 (3.9)[ 或 者 等 价 地 ，(3.6) 中 的 一 对 关系 式 ] 有 且 只 有 一 个 在 概率 上 
可 能 的 解 (P, 切 ). 

这 蕴含 p 是 首次 进入 一 00,0 的 点 的 分 布 , 并 且 少 = 于 HH"*， 其 中 互 是 首次 

进入 0,co 的 点 的 分 布 . 
证 设 p# 和 w# 是 两 个 满足 (3.6) 的 非 负 测度 , 并且 y# > wo. 利用 归纳 法 , 我 
们 由 (3.6b) 得 出 , 对 于 每 个 wy# > wo 十 … 十 ,从 而 在 对 于 其 他 在 原点 上 有 单 
位 原子 的 解 y#,%#{T} > w{1} 对 所 有 的 区 间 了 成 立 的 意义 下 , 我 们 的 解 由 是 最 小 
的 . 换 名 话说, 5 = 4# 一 纱 是 一 个 测度 . 现在 由 (3.6a) 可 以 看 出 , 对 r =p# 一 p 也 
有 同样 的 结论 成 立 . 由 于 (p,) 和 (p#,y#) 两 者 都 满足 (3.9), 所 以 我 们 有 


5 十 了 一 6 丰 忆 (3.13) 


设 工 是 一 个 固定 的 有 限 区 间 , 令 z(t) = 5{7 十 甘 . 有 两 种 可 能 的 情形 . 如 果 p 
是 正常 分 布 , 那么 p# > p 这 个 事实 蕴含 p# = p, 从 而 7 = 0. 于 是 z 是 卷 积 方程 
z 三 了 太 z 的 有 界 解 . 因此 , 根据 归纳 法 , 对 于 所 有 的 n, 有 


:的 = /seay). (4) 


于 是 z > 0, 且 对 于 每 个 使 得 ++ 包含 在 负 半 轴 内 的 上 有 z(t) = 0. 对 于 这 样 的 二 
由 (3.14) 显然 有 ,对 于 是 某 个 F"* 的 增 点 的 每 个 y, z(t 一 2) = 0. 根据 5.4a 节 的 
引 理 2, 这 样 的 y 组 成 的 集合 是 处 处 稠密 的 ， 因 此 z 恒 等 于 0. 

对 于 亏损 的 p, 我 们 只 知道 Y > 0, 于 是 (3.13) 只 蕴含 z < FF 支 z. 在 这 种 情形 
下 , (3.14) 把 等 号 换 成 < 也 成 立 . 但 是 , 此 时 随机 游 动 趋向 co， 从 而 F"* 的 质量 
趋 于 集中 在 co 近 旁 . 而 且 对 于 所 有 充分 大 的 y, z(t 一 y) = 0, 从 而 z 一 定 恒 等 于 0. 
因此 , YW# = 少 , 如 所 断言 . p> 


维 纳 一 霍 普 夫 积分 方程 
为 了 说 明 积分 方程 (3.9) 和 标准 维 纳 - 稚 普 夫 方程 之 间 的 联系 , 最 好 从 一 个 这 
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样 的 概率 问题 出 发 , 使 得 在 这 个 问题 中 出 现 标准 维 纳 - 霍 普 夫 方程 
例 (c) 最 大 值 的 分 布 , 为 了 简单 起 见 ,我们 假设 分 布 F 有 密度 f 而 且 它 的 期 户 
为 负 值 . 随机 游 动 {5m} 趋向 -co， 有 限 值 随机 变量 


M = max[0, $1, 52,…] (3.15) 


以 概率 1 为 确定 的 . 我 们 打算 计算 它 的 概率 分 布 M(z) = P{M < z}. 根据 定义 , 此 
分 布 集中 于 0,co 上 . 为 使 事件 {M < z} 发 生 , 当 且 仅 当 


X1=y<TH maxf0,X2,X2 +Xa…]<z- 沙 
对 所 有 可 能 的 y 求 和 , 我 们 得 到 
aM(z) = / 1 M(z -f(y)dy, z>0, (3.16) 


这 与 
MI(z) = 人 M(s)f(z—s)ds, z>0 (3.17) 
0 


相同 另 一 方面 , 我 们 由 (2.7) 知道 ，M(z) = [1 一 五 (oo)jy(z). 我 们 已 看 到 多 满 足 
积分 方程 (3.7b), 其 中 在 目前 的 条 件 下 , p(0) = 1. 于 是 通过 简单 的 分 部 积分 可 以 说 
明 (3.7b) 和 (3.17) 实际 上 是 相同 的 . > 

(3.17) 是 维 纳 - 霍 普 夫 积分 方程 的 标准 形式 , 我 们 的 例子 说 明 它 在 概率 论 中 出 
现 的 方式 . 但 是 , 维 纳 - 霍 普 夫 方法 的 一 般 文献 是 令 人 误解 的 , 因为 限制 于 正 函 数 
和 测度 而 改变 (和 简化 ) 了 这 个 问题 的 性 质 . 

N. 维 纳 和 E. 霍 普 夫 用 来 处 理 (3.17) 的 巧妙 方法 ?受到 了 广泛 的 注意 , 已 被 应 
用 于 各 种 概率 问题 , 例如 ， 克 拉美 H. Gramér 用 它 推导 出 了 破产 概率 的 渐 近 估计 . 
这 个 方法 要 用 到 很 难 的 分 析 工 具 ， 从 而 由 现在 的 方法 不 费力 地 得 出 这 些 估计 几乎 
是 令 人 不 安 的 . 其 更 深刻 的 理由 可 以 这 样 理解 . 方程 (3.17) 最 多 代表 (3.7) 中 的 两 
个 方程 之 一 ， 当 p(0) < 1 时 就 不 用 说 了 . 单独 讨论 (3.17) 比 讨论 (3.7) 中 的 两 个 关 
系 式 要 困难 得 多 . 例如 ,唯一 性 定理 对 (3.17) 就 不 成 立 , 即使 只 讨论 概率 分 布 也 是 
如 此 . 事实 上 , 维 纳 - 霍 普 夫 方法 的 基本 思想 是 引进 一 个 辅助 函数 ， 此 函数 在 一 般 
理论 中 没有 特殊 的 意义 . 这 实际 上 把 单个 的 方程 (3.17) 换 成 一 对 与 (3.7) 等 价 的 方 
程 , 但 唯一 性 失去 了 . 我 们 按 相 反 的 方向 进行 讨论 ,从 与 下 列 两 个 不 可 分 离 的 问题 
有 关 的 循环 系统 (3.5) 开始 : 首次 进入 二 co,6 和 在 这 个 首次 进入 之 前 随机 游 动 局 限 
于 z > 0. 这 样 我 们 就 从 已 知 的 解 导出 了 积分 方程 (3.9), 并 且 容 易 证 明 概率 解 的 唯 

@ 可 和 追 涛 到 1931 年 . 在 第 一 部 专著 , E. Hopf ，Mathematical problems of radiatjve equilibrium, 

Cambridge tracts, No. 31, 1934 之 后 出 现 了 大 量 的 文献 . 
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一 性 . 收敛 性 的 证 明 、 解 的 性 质 、 以 及 最 大 值 的 分 布 M 与 更 新 测度 多 之 间 的 联系 
都 依赖 于 对 偶 性 引 理 . 

第 1 个 发 现 可 以 用 对 偶 性 原理 来 解 维 纳 - 霍 普 夫 方程 (3.17) 的 是 F, 斯 皮 策 
尔 98. 把 维 纳 - 乱 普 夫 理论 和 概率 问题 联系 起 来 的 普通 方法 ， 是 从 与 下 面 的 (9.3) 
有 关 的 公式 的 傅 里 叶 形式 开始 的 ,我们 将 在 第 18 章 中 讨论 它们 的 传 里 叶 形 式 . 现 
在 有 很 多 的 文献 把 维 纳 - 霍 普 夫 方法 与 概率 问题 联系 起 来 , 扩大 了 组 合 方法 的 范 
这 类 文献 大 多 数 利用 传 里 叶 方法 .2 


12.4 例 


首次 进入 分 布 的 显 式 一 般 说 来 很 难得 到 . 幸好 有 一 个 值得 注意 的 例外 , 我 们 将 
在 例 (a) 中 讨论 它 . 乍 看 起 来 这 个 例子 中 的 分 布 玉 似乎 不 太 自 然 , 但 是 这 种 类 型 的 
分 布 经 常 出 现在 泊 松 过 程 、 排 队 论 、 破 产 问题 等 等 之 中 . 如 果 考虑 到 我 们 的 一 般 结 
果 的 极其 简单 性 , 那么 我 们 就 很 难 相信 人 们 在 各 个 特殊 的 情形 上 花费 了 (经 常 是 重 
复 的 ) 多 少 精力 , 运用 了 多 少 分 析 技巧 . 

例 (0)( 以 相当 平凡 的 形式 ) 给 出 了 具有 有 再 母 西数 的 算术 分 布 的 情形 下 的 
全 部 计算 . 之 所 以 给 出 计算 , 是 因为 同一 方法 可 用 于 有 理 拉 普 拉 斯 变换 或 者 有 理 傅 
里 叶 变 换 . 在 习题 3~ 习题 6 中 可 找到 另外 一 个 例子 . 例 (b) 讨论 具有 独立 意义 的 
一 般 关系 . 

我 们 沿用 上 节 的 记号 . 于 是 万 和 p 分 别 是 首次 进入 “0,co 和 -co,0 的 点 的 
分 布 . ( 换 句 话说 , 万 和 p 分 别 是 第 一 个 严格 上 升 阶梯 高 度 和 第 一 个 弱 下 降 阶梯 高 
度 的 分 布 ) 最 后 , % = 导 nx 是 对 应 于 五 的 更 新 函数 . 我 们 的 主要 工具 是 方程 
(3.7a)， 它 说 明 对 于 z < 0, 首次 进入 二 5o,0 的 分 布 为 


pa= 人 wdyjFle 一 功 (4 


例 (a) 具有 一 个 指数 型 尾部 的 分 布 出 人 意料 地 经 党 出现. 例如 , 在 6.8 节 例 (b) 的 

随机 游 动 和 相应 的 排队 过 程 6.9 节 例 (e) 中 , 两 个 尾部 都 是 指数 型 的 . 作为 介绍 , 我 

们 假设 的 左 尾部 是 指数 型 的 , 即 对 于 z < 0, P(z) = qe9*. 不 管 少 是 怎样 的 , (4.1) 

表明 ,对 于 > < 0,p(z) = ce5*， 其 中 c 是 常数 . 由 于 得 到 了 这 个 结果 , 我们 交换 2 

@ The Wiener-Hopf equation whose kernel is a prbability density, Duke Math. 1., vol 24(1957) 
.327-343. 

@ 由 于 参考 文 二 比较 和， 再 加 上 许多 论文 所 用 的 方法 受 历史 发 展 的 偶然 性 的 影响 ， 所 以 对 参考 文献 


作 一 个 有 意义 的 简介 是 不 可 能 的 . 向 概率 论 范围 以 外 的 推广 曾 举例 说 明 于 G. Baxter, An operator 
identity, Pacific J. Math., vol, 4(1958)pp.649-663. 
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个 半 轴 的 作用 (这 部 分 地 是 为 了 便于 应 用 我 们 的 公式 , 部 分 地 是 由 于 它 在 排队 论 中 
最 重要 的 应 用 ). 其 次 假设 


F(z)=1—pe-°*, z>0, (4.2) 


而 对 z < 0 不 加 任何 条 件 . 为 了 避免 不 必要 的 复杂 化 , 我 们 假设 天 有 有 限 的 期 望 p， 
并 且 假设 下 是 连续 的 . 由 本 节 开 始 时 的 说 明 可 知 ,阶梯 高 度 分 布 的 密度 与 eo” 
成 正比 . 我 们 现在 来 区 分 两 种 情形 . 

人 如果 > 0, 那么 五 是 正常 分 布 , 从 而 对 z > 0， 


H(z2) =1—e-°, yz) =1+ar. (4.3) 
[后 者 显然 可 从 = 汇 H"* 或 更 新 方程 (3.10) 推出 . ] 由 (4.1) 我 们 得 到 
plz) = F(z) + a 人 F(s)ds, z <0, (4.4) 
于 是 我 们 得 到 了 所 有 要 求 的 概率 的 明显 表达 式 . 简单 的 计算 表明 
p(0) = 1— op. (4.5) 


这 是 (2.8) 的 特殊 情形 ,因为 根据 (2.5) 有 (1 - P(O))-: = E( 有 2). 

的 如 果 /< 0, 那么 关系 式 (4.3) 和 (4.4) 仍 表示 积分 方程 (3.9) 的 一 个 解 , 但 
是 由 于 (4.5), 在 < 0 时 它 在 概率 上 是 不 可 能 的 . 对 于 正确 的 解 ,我 们 知道 有 
密度 h(z) = (a - kje “=,， 其 中 0<k<a, 因为 H 是 亏损 分 布 . 简单 的 计算 说 明 ， 
对 z> 0W(z) = (a 一 ke- 生 .未 知 常数 可 由 p(0) = 1 这 个 条 件 得 到 . 通过 常规 
计算 可 以 证 明 k 一 定 是 方程 (4.6) 的 唯一 正 根 . 给 定 这 个 超越 方程 的 根 ,我们 就 又 
得 到 了 理 , p 各 少 的 明显 公式 . 

读者 容易 验证 ， 当 随机 游 动 的 变量 X1, XX2,… 是 整 值 随机 变量 且 分 布 F 有 一 
个 几何 型 尾部 , 即 天 对 整数 > 0, 赋予 重量 98* 时 , 也 可 得 到 同样 的 结果 . 
例 (b) ”相伴 随机 游 动 . 假设 下 的 期 并 4 关 0, 并 且 存 在 上头 0, 使 得 


~ 这 ew pF{dy} Sk (4.6) 
给 定 直线 上 的 任意 一 个 测度 Y. 我 们 称 由 


“y{dy} = ervy{dy} (4.7) 
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定义 的 新 测度 *y 是 7 的 相伴 测度 . 的 相伴 测度 。F 也 是 正常 概率 分 布 ， 我 们 称 
由 “入 产生 的 随 宙 游 动 是 令 此 相伴 的 .0 容易 看 出 ，* 与 其 本 身 的 n 重 卷 积 
是 与 Fnx 相伴 的 ， 从 而 记号 。F"* 的 意义 是 明确 的 . 此 外 ， 递 推 公式 (3.5) 表明 ， 
变换 sp 和 “yn 在 新 随机 游 动 中 的 概率 意义 与 pa 和 如 在 旧 随 机 游 动 中 的 概率 意 
义 相 同 . 由 此 一 般 地 推出 ,对 于 与 *“F 相伴 的 随机 游 动 ， 变 换 %p,* 百 " 落 等 具有 明显 
的 意义 . [这 也 可 以 从 积分 方程 (3.9) 直接 看 出 . ] 
积分 
o0= 人 wertay 


对 于 0 和 上 之 间 的 所 有 tt 都 存在 , 在 这 个 区 间 内 bp 是 无 限 可 微 的 . 因 二 阶 导数 是 正 
的 , 故乡 是 凸 函 数 . 如 果 VW(k) 存在 , 那么 8(0) = 9(k) 这 个 事实 蕴含 WV(0) 和 VW(k) 
具有 相反 的 符号 . 因此 , 由 忆 和 “F 导出 的 随机 游 动 趋向 相反 方向 , (即使 在 “F 没 
有 有 限期 望 的 例外 情形 下 , 这 仍 是 正确 的 . ) 

于 是 我 们 得 到 了 一 个 可 以 广泛 应 用 的 方法 ， 它 把 关于 满足 / < 0 的 随机 游 动 
的 事实 变 成 期 望 为 正 值 的 随机 游 动 的 结果 , 反之 亦 然 . 

如 果 py < 0, 那么 阶梯 高 度 分 布 瑟 是 亏损 的 , 但 " 瓦 是 正常 分 布 . 这 就 是 说 


请 ewH{dy} =1. (4.8) 
0 


相伴 随机 游 动 的 方法 的 威力 多 半 来 自 于 这 个 说 明 . 实际 上 , 我 们 从 11.6 节 知道 , 如 
果 我 们 已 知 方程 (4.8) 的 根 , 那么 可 以 得 到 上 升 阶梯 过 程 的 极 好 的 渐 近 估计 . 如 果 这 
些 估计 需要 用 到 及, 那么 这 些 估计 就 没有 什么 用 处 , 但 是 我 们 现在 看 到 (4.8) 和 (4.6) 的 
根 是 相同 的 . 

例 (c) 有 界 的 算术 分 布 . 设 和 是 正 整数 , 是 步 长 为 1 且 在 k=-b…,a 上 
有 跳跃 fi 的 算术 分 布 . 测度 少 和 p 也 集中 于 整数 上 , 我 们 分 别 用 光 和 px 表示 它们 
在 k 上 的 跳 唉 . 首次 进入 二 co;0 发 生 在 一 个 整数 > -上 , 从 而 对 于 大 < -bpk =0. 
我 们 引进 母 函数 


a oo 0 

G(s)= 》， 记 sk， 7(s) = 》 es, R(s)= > prs*. (4.9) 

k= k=0 = 二 

它们 与 第 1 卷 第 11 章 中 的 母 函 数 的 不 同 之 处 , 在 于 $B 和 R 也 包含 s 的 负数 次 宕 ， 

但 是 很 明显 , 基本 的 性 质 和 法 则 仍然 不 变 . 特别 地 , py = 于 (1) 是 五 的 期 望 . 分 布 的 
@ 这 个 概念 曾 被 A. 辛 钦 、 瓦 尔 德 (A. Wald) 和 其 他 人 使 用 过 , 但 从 未 被 充分 使 用 过 . 变换 (4.7) 已 


用 于 11.6 节 的 更 新 理论 和 (由 于 使 用 了 母 函 数 而 以 伪装 了 的 形式 ) 第 1 卷 13.10 节 的 定理 1( 者 ), 
并 将 用 于 13.1 节 (1.8) 的 拉 普 拉 斯 变换 中 , 方程 (4.6) 也 在 维 纳 - 震 普 夫 理 论 中 起 作用 - 
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卷 积 对 应 于 母 函 数 的 乘积 , 因此 基本 积分 方程 (3.9) 等 价 于 更 十 忆 = 1+ 业 或 


sb(R(s) — 1) 


"0 ga) = 


(4.10) 

分 子 和 分 母 分 别 是 5 次 和 a+5b 次 多 项 式 . 当 |s| < 1 时 , 左边 的 短 级 数 是 正则 
的 , 因此 分 母 的 所 有 位 于 单位 圆 内 的 根 应 与 分 子 的 根 相抵 消 . 我 们 着 手 证 明 这 个 要 
求 唯一 地 确定 了 忆 和 更 . 

为 具体 起 见 , 设 上 = 0. (关于 关头 0 的 情形 见习 题 12 和 习题 13. ) 于 是 s = 1 
是 方程 5(s) = 1 的 二 重 根 . 对 于 |s| = 1, 我 们 有 |$(s)| < 8(1) = 1, 其 中 不 等 号 只 
有 在 对 于 使 六 > 0 的 每 个 大 都 有 s* = 1 时 才 成 立 . 由 于 假设 分 布 F 的 步 长 为 1， 
所 以 这 只 有 当 s = 1 时 才 成 立 . 从 而 没有 更 (s) = 1 的 其 他 根 位 于 单位 圆周 上 . 为 了 
看 出 有 多 少 根 位 于 单位 圆 内 部 , 我 们 考虑 一 个 由 


Ps) = ss[$(s)—q, gq>1 
定义 的 a+b 次 多 项 式 . 对 于 |s| = 1, 我 们 有 |P(s|>g-1>0 且 
IP(s) + gs| =|8(s)| < 1 < gs 


根据 鲁 葡 (Rouche) 定理 9, 这 理 含 多 项 式 P(s) 和 gs? 在 单位 圆 内 有 相同 数目 的 零 
点 .由 此 推出 P 恰 有 5 个 根 满足 |s| < 1， 有 a 个 根 满足 |s| > 1. 由 于 P(0) = 
0,P(1) = 1 一 g < 0, 而 对 于 大 的 s, P(s) > 0, 从 而 已 有 两 个 实 根 < 1 < s”. 当 
q 一 1 时, P 的 诸 根 趋 于 $(s) = 1 的 诸 根 , 因此 我 们 最 后 断言 ，(4.10) 中 的 分 母 以 
1 为 二 重 根 有 5b 一 1 个 根 s1,…,s。-1 满足 |s;| < 1, 有 a 一 1 个 根 o1,…,oo-1 满 
足 |o;| > 1. 于 是 分 母 具 有 形式 


sb(B(s)—1)=C(s—1)(s—s1):*(s— s6-1)(s —01)**(s— ga-1). (4.11) 


根 1,…,s6-1 必定 与 分 子 的 根 相 抵消 ， 因 为 系数 ,是 有 界 的 ， 所 以 有 一 个 根 
5 三 1 也 与 分 子 的 根 相抵 消 . 这 就 确定 了 交 ( 除 了 一 个 乘积 常数 外 ). 但 是 , 根据 定义 
更 (0) = 1, 从 而 我 们 得 到 了 所 要 求 的 显 式 

1 
Qs) s/o) — s/o01)” 
把 它 展 成 部 分 分 式 可 得 如 的 明显 表达 式 , 这 个 公式 的 一 大 优点 是 知道 了 主根 后 可 
得 出 合理 的 渐 近 估计 ( 见 第 工 卷 11.4 节 ). 


@ 例如 , 见 E. Hille, Analytic function theory, vol. 1, section 9.2.(Ginn and Co., 1959.) 


y(s) = (4.12) 
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关于 首次 进入 概率 Ax 的 母 函数 RR, 我 们 由 (4.10) 和 (4.12) 得 到 
R(s) =1+C:(-1) o.oo 1(1—1/s)(1 — s1/s)::*(1— s6_1/s). (4.13) 


[系数 C 由 (4.11) 定义 , 它 只 依赖 于 给 定 的 分 布 {fi}. ] 部 分 分 式 展开 式 又 可 
导致 浙 近 估计 . (在 习题 12~ 习题 15 中 继续 讨论 . ) 


12.5 应 用 


在 6.9 节 中 曾 指出 , 排队 论 的 一 个 基本 问题 是 在 具有 使 得 1 = Re <0 的 变 
量 Xx 的 随机 游 动 中 求 出 
M = maxl0, S1,.…1] (5.1) 


的 分 布 M. 6.9 节 例 (a)~ 例 (c) 说 明 同样 的 问题 也 出 现在 其 他 的 领域 中 , 例如 在 复 
合 泊 松 过 程 的 破产 问题 中 . 在 这 种 情形 中 以 及 在 排队 论 中 , 基本 分 布 具有 形式 


已 = 4 妈 悍 ， (5.2) 


其 中 4 集中 于 0,50 上 , B 集中 于 -06,0 上 . 我 们 假设 4 和 B 有 有 限 的 期 望 o 和 
一 b, 从 而 下 的 期 望 为 = a 一 b. 我 们 还 假设 已 是 连续 的 ,以 避免 严格 阶梯 变量 和 
弱 阶 梯 变 量 之 间 的 乏味 的 区 别 . 

和 在 上 两 节 中 一 样 , 我 们 分 别 用 吾 和 p 表示 上 升 和 下 降 阶梯 高 度 的 分 布 .为 
了 一 致 我 们 应 把 p 写成 了 H-) 换 句 话说 , H 和 p 是 首次 进入 而 55 和 =o6,0 (也 是 首 
次 进入 相应 的 闭 区 间 ) 的 点 的 分 布 . 在 12.3 节 例 (c) 和 (2.7) 中 曾 指出 , 如 果 几 < 0， 
那么 


_z) 1 SR 
M(z) = Neo) =[1-H(o0)] Tu 友 (Z). (5.3) 
如 果 FF 的 尾部 之 一 是 指数 型 的 ， 即 
F(z)=1—pe-°, z>0, (5.4) 


或 者 对 于 > < 0, F(z) = desz, 那么 12.4 节 例 (a) 包含 了 上 述 分 布 的 一 个 明显 的 公 
式 9. 

@ 关于 具有 有 限 多 个 原子 的 算术 分 布 的 情形 , 12.4 节 例 (c) 得 到 了 另外 一 个 明显 的 公式 , 这 个 明显 的 

公式 并 不 实用 , 但 是 如 果 已 知 分 母 的 主根 ,那么 利用 其 部 分 分 式 展开 式 可 导出 良好 的 渐 近 估计 . 当 


下 的 特征 函数 是 有 理 函数 时 , 同样 的 方法 也 适用 于 傅 里 叶 变换 . 这 个 说 明 包含 了 文献 中 讨论 的 许多 
特殊 情形 . 
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幸好 , 如 果 已 具有 形式 (5.2), 并 且 
4(z) =1-er“=，z>0， (5.5) 
那么 条 件 (5.4) 成 立 . 于 是 
p= / dy (5.6) 
因此 , 当 打 往 电话 交换 台 的 呼叫 服从 泊 松 分 布 或 服务 时 间 服 从 指数 分 布 时 , 我 们 的 
简单 结果 可 用 于 排队 论 . 此 外 , 现在 的 条 件 包括 了 复合 泊 松 过 程 中 的 破产 问题 . 现 
在 有 大 量 的 应 用 方面 的 文献 . 在 关于 分 布 B 的 各 种 假设 下 讨论 特殊 的 问题 有 时 ， 
比如 在 破产 ( 输 光 ) 问题 中 , 这 种 假设 以 伪装 了 的 形式 出 现 . 实际 上 , 只 要 利用 (5.4) 
而 不 利用 条 件 (5.5) 和 (5.2) 的 组 合 就 可 以 达到 较 大 的 一 般 性 和 简单 性 . 我 们 在 这 里 
得 到 一 个 在 一 般 理 论 中 可 以 节省 思考 的 重要 例子 . 在 一 般 理 论 中 , 我 们 的 思路 不 会 
被 特殊 情形 的 偶然 性 搞 乱 . 
例 (a) 辛 钦 - 波 拉 杰克 (Khintchine-Pollaczek) 公式 . 假设 已 具有 (5.2) 的 形式 ， 
其 中 4 由 (5.5) 给 出 , 并 且 4= i 一 b> 0. 这 个 随机 游 动 趋向 co, 我 们 必须 把 (5.1) 
中 的 最 大 值 换 为 最 小 值 . 这 就 是 说 , 要 把 (5.3) 中 的 互 换 为 由 (4.4) 给 出 的 分 布 p， 
用 简单 的 分 部 积分 可 以 证 明 , 对 z < 0， 


p(w) =a Bay. (57) 
从 而 p(0) = ab, 央 此 对 于 2 < 0， 
P{min(S0, 1,°°:) < 2} = (1 — ab) Dp"*(z). (5.8) 
0 


这 就 是 著名 的 辛 钦 - 波 拉 杰克 公式 , 此 公式 已 在 各 种 特殊 情形 下 被 多 次 重新 发 现 ， 
所 用 的 方法 都 是 拉 普 拉 斯 变换 [这 种 方法 不 适用 于 形 如 (5.4) 的 较 一 般 的 分 布 . 我 
们 将 在 18.7 节 的 习题 10 和 习题 11 中 再 次 讨论 它 . 
例 (b) 对偶 情形 , 仍 考虑 上 例 中 的 分 布 , 但 这 里 要 求 4 < 0. 正如 12.4 节 例 (a) 第 
2 部 分 指出 的 那样 , 在 这 种 情形 下 

P{fmax(So,S…) <z} = yo) =1-(1- 2) eke, (5.9) 
其 中 是 “特征 方程 "(4.6) 的 唯一 正 根 . [由 于 当 /> 0 时 我 人 有 W(z) = 1 + am， 
z > 0, 所 以 这 个 结果 可 以 利用 相伴 随机 游 动 的 方法 得 到 . ] 在 排队 论 中 (5.9) 蕴含 ， 
在 一 个 服务 时 间 服 从 指数 分 布 的 服务 员 那 里 ， 等 待 时 间 的 分 布 越 于 一 个 指数 极限 
分 布 . 
例 (ce) 渐 近 估计 . 利用 12.4 节 例 (b) 所 述 的 相伴 随机 游 动 的 方法 容易 得 到 关于 下 
列 分 布 的 尾部 的 有 用 估计 : 


M(z) = P{max(So, S51,.…) < 7}. (5.10) 
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下 述 简单 方法 可 以 代替 应 用 方面 的 文献 中 对 特殊 问题 所 用 的 许多 复杂 计算 ， 它 是 
11.6 节 中 一 般 理 论 中 一 个 特殊 情形 , 但 是 为 了 方便 起 见 ， 下 面 的 叙述 是 自 成 一 体 
的 . 

分 布 M 由 (5.7) 给 出 . 其 中 少 表示 一 个 对 应 于 亏损 分 布 召 的 更 新 测度 . 对 于 
与 HH 相伴 的 正常 分 布 * 太 ， 有 一 个 由 “yw{dz} = e**w{dz} 给 出 的 相应 的 测度 “ 少 ， 
其 中 大 由 (4.6) 或 (4.8) 给 出 . 因此 (5.3) 可 以 改写 成 形式 


M{dz} = [1 — H(oo)je-* 2 {dz}. (511) 
根据 11.1 节 的 基本 更 新 定理 , 更 新 测度 “vy 是 渐 近 均匀 分 布 的 , 密度 为 8-!, 其 中 
人 kz 
8 人/ zersH{dz}. (5.12) 
因此 , 在 (5.11) 的 两 边 取 t 到 oo 的 积分 , 我 们 看 出 , 当 t 一 co 时 ， 
1_ MO ~ en (5.13) 


只 要 B < oo. [否则 1 一 M(t) = o(e-*). ] 

常数 8 依赖 于 通常 不 是 明显 已 知 的 分 布 甩 , 但 是 常数 只 依赖 于 给 定 的 分 布 
F. 因此 , 在 最 坏 的 情形 下 , (5.13) 是 包含 一 个 未 知 因子 的 估计 , 即使 这 个 结果 用 其 
他 方法 也 不 容易 得 到 . 下 列 说 明 重要 的 应 用 . 
例 (d) ”克拉 美的 破产 概率 估计 . 我 们 现在 把 上 述 结果 应 用 于 例 (a). 这 里 随机 游 
动 趋向 +co， 从 而 应 交换 正 半 轴 和 负 半 轴 的 作用 , 这 就 是 说 , k < 0 , 分布 互 被 换 
成 首次 进入 =co,0 的 分 布 (5.7). 于 是 (5.12) 呈 下 面 的 形式 : 


6=a 人 ”eBay (5.14) 


我 们 看 出 , p(0) = ab, 因此 (5.13) 等 价 于 下 述 断 言 : 当 z 一 co 时 ， 


Plmin(s0,54.…) <) ~ 二 侣 
这 个 公式 有 许多 应 用 . 在 排队 论 中 左边 表示 第 n 个 顾客 的 等 待 时 间 的 极限 分 布 ( 见 
6.9 节 的 定理 ). 在 6.9 节 例 (d) 中 曾 指出 , 6.5 节 的 基本 破产 问题 可 以 化 成 这 个 排队 
问题 . 在 11.7 节 例 (a) 中 用 不 同 记号 讨论 了 这 个 问题 . ?因此 ,可 以 在 特殊 情况 下 
重复 地 推导 出 (5.15) 是 不 奇 色 的 ,但 是 在 它 的 自然 的 一 般 背 景 下 这 个 问题 就 变 得 


@ 对 于 这 个 集中 于 一 0,0 上 的 亏损 分 布 p， 在 11.7 节 中 有 一 个 相应 的 亏损 分 布 L， 它 具有 集中 
于 可 co 上 的 密度 (a/c)(1 一 F(z))- 


elkl. (5.15) 
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更 简单 了 . 从 一 般 理论 的 观点 来 看 ，(5.15) 等 价 于 克拉 美的 关于 风险 理论 中 破产 概 
率 的 著名 估计 .9 p> 


12.6 ”一 个 组 合 引 理 


阶梯 时 刻 的 分 布 的 推导 依赖 于 一 个 简单 的 组 合 引 理 ， 如 果 我 们 把 这 个 引 理 分 
离 出 来 , 那么 这 个 论证 的 概率 部 分 就 会 更 加 清楚 . 
设 za,，…zn 是 个 数 , 考虑 它们 的 部 分 和 


s0 =0,.…, sn = ZT1+**++ Tn. 


我 们 说 v> 0 是 一 个 阶梯 指标 , 如 果 su > so,…,ss > so-1, 即 如 果 so 大 于 所 有 前 
面 的 部 分 和 . 如 果 所 有 的 r。 都 是 正 的 , 那么 有 nn 个 阶梯 指标 , 而 如 果 所 有 的 zw 都 
是 负 的 , 那么 就 没有 阶梯 指标 . 

考虑 个 循环 重 排 (zi zj，(za…zmzlD)，…，(zmzl yzn-1)， 并 且 
从 0 到 n 一 1 给 它们 编号 , 在 第 v 个 排列 中 的 部 分 和 sv) 为 

sO =s0rk—s0 天 = 站 (6.) 

Sn 一 Su 十 SKk-n+u， k=n—v+1,.…,n. 
引 理 1 假设 sn > 0. 用 r 表 示 这 样 的 循环 重 排 的 个 数 , 使 在 其 中 nn 是 一 个 阶梯 指标 . 
那么 r > 1， 在 每 个 这 样 的 柱 环 重 排 中 恰 有 r 个 阶梯 指标 . 
例 ”对 于 (-1 -10,110), 我 人 有 "= 1, 给 定 的 次 序 是 使 得 最 后 一 个 部 分 和 为 极 
大 的 唯一 次 序 . 对 于 (-147,1), 我 人 有 "= 3, 第 0, 2, 3 个 排列 都 有 3 个 阶梯 指 
标 . 
证 ”选取 这 样 的 v, 使 得 s。 是 最 大 值 ， 并 且 如 果 有 几 个 这 样 的 指标 ， 取 v 为 最 小 
的 一 个 . 换 句 话说 ， 


LR ET RT (6.2) 


于 是 由 (6.1) 可 知 , 在 第 v 个 排列 中 , 最 后 一 个 部 分 和 是 严格 最 大 值 , 从 而 n 是 阶 
梯 指 标 . 因此 , 7 > 1. 不 失 一 般 性 , 我 们 现在 假设 ”是 原来 排列 中 的 阶梯 指标 ， 即 
对 于 所 有 的 了 有 sn > sj. 于 是 (6.1) 中 第 1 行 的 诸 基 < sn, (6.1) 中 的 第 2 行 说 明 ， 
为 使 ”在 第 v 个 排列 中 也 是 阶梯 指标 ,， 当 上 且 仅 当 s。> s1,… ,so > so-1, 即 当 且 仅 
当 " 在 原来 的 排列 中 是 阶梯 指标 . 因此 , 若 是 排列 中 的 阶梯 指标 , 则 排列 的 个 数 
等 于 阶梯 指标 的 个 数 ， 引 理 得 证 . p> 


@ 关于 利用 复 平面 上 的 维 纳 一 霍 普 夫 方法 的 新 推导 见 6.5 节 中 引用 的 克拉 美的 论文 (5.15) 是 
克拉 美 论文 中 的 (57)- 
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弱 阶 梯 指 标 也 可 以 类 似 地 定义 ,只 是 要 把 严格 不 等 号 > 换 成 >. 对 它们 应 用 
上 述 论证 可 得 
引 理 2 如 果 sn > 0, 那么 引 理 1 也 适用 于 弱 阶 梯 指 标 . 


12.7 ”阶梯 时 刻 的 分 布 
在 前 几 节 中 我 们 把 注意 力 集中 在 阶梯 高 度 上 , 现在 我 们 转向 讨论 阶梯 时 刻 . 令 
Tn =P{S <0,.…,5n_1 <0,5n > 0}. (7.1) 


这 是 首次 进入 0,00 发 生 在 第 n 步 的 概率 , 从 而 {7n} 是 第 一 个 阶梯 时 刻 及 的 (可 
能 是 亏损 的 ) 分 布 . 我 们 引入 它 的 母 函 数 


T(s) = Se, 0<s<l. (7.2) 
n=1 
下 列 不 平常 的 定理 表明 , 分 布 {7%} 可 由 概率 P{5, > 0} 完全 确定 , 反之 亦 然 . 
它 是 由 E. 斯 帕 里 . 安德森 发 现 的 ,他 的 巧妙 而 极 复杂 的 证 明 已 渐渐 被 一 些 作者 简 
化 . 我 们 把 这 个 定理 作为 我 们 的 组 合 引 理 的 一 个 简单 推论 来 推导 它 ，[ 一 个 较 强 的 形 
式 包含 在 (9.3) 中 , 并 将 在 第 18 章 中 用 傅 里 叶 方法 加 以 讨论 . ] 
定理 1 


1 Cs 
no) -2 nr{s > 0}. (7.3) 


注 “如 果 在 (7.1) 和 (7.3) 中 把 符号 > 和 < 分 别 换 成 > 和 <， 则 定理 及 其 证 明 仍 
然 成 立 . 在 这 种 情形 下 , {7n} 表示 第 一 个 弱 阶 梯 时 刻 的 分 布 . 

证 ”对 于 每 个 样本 点 考虑 个 循环 排列 (X。,… ,和 XX1,… XX。-1), 并 用 30， 
S4) 表示 相应 的 部 分 和 . 固定 一 个 整数 7, 定义 n 个 随机 变量 YQ) 如 下 , 如 果 n 是 
(S89,…,549) 的 第 > 个 阶梯 指标 ,那么 YC) = 1， 否 则 Yo =0, 对 于 v=1, 对 
应 的 是 没 经 重 排 的 序列 (50,…, Sm), 从 而 


P{Y® =1}=7h), (7.4) 


其 中 {74} 是 第 7 个 阶梯 时 刻 的 分 布 . 这 个 时 刻 是 7 个 与 到 同 分 布 的 独立 随机 变 
量 之 和 , 从 而 7 ) 是 第 次 短 rc)(s) 中 sn 的 系数 . 
根据 对 称 性 , 变量 YW) 有 相同 的 分 布 ; 因为 它们 只 取 值 0 和 1， 所 以 由 (7.4) 
我 们 得 到 
ro =E(YW) = iE(Y® 十 二 了) (7.5) 
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根据 上 节 的 引 理 , 和 YG) 十 … 十 Y(" 只 可 能 取 值 0 和 r, 从 而 
lp = iP{Y® 二 一 中 (7.6) 


对 于 固定 的 n 和 "= 0,1,…, 右边 的 事件 是 互 斥 的 , 它们 的 并 和 集 是 事件 {Sn > 0}. 
因此 , 对 > 求 和 , 我 们 得 到 ， 


ol 
1 
D7 = Ps >0), (7.7) 


r=1 


两 边 都 乘 以 s" 并 对 n 求 和 , 我 们 得 到 


b> 17(s) = bp Tp{s, >0}, (7.8) 
r=1 r=1 
这 和 断言 (7.3) 相同 . 
系 ”如 果 下 是 连续 且 对 称 的 ， 那么 
7(s)=1— V1—s. (7.9) 
证 在 (7.3) 中 出 现 的 所 有 概率 是 相等 的 , 从 而 右边 等 于 In(1/Vi 一 8). p 
只 假设 人 
P{Sn >0}—3 (7.10) 


而 推广 上 述 结 果 是 有 趣 的 . 当 Sn/an 的 分 布 趋 于 正 态 分 布 只 时 , 情况 就 是 这 样 . 我 
们 的 假设 只 比 (7.10) 强 一 点 , 即 设 级 数 


六: [ets, >0}- 引 =¢. (711) 
收敛 (不 一 定 绝对 收敛 ). 在 18.5 节 中 将 证 明 , 当 FF 的 期 望 为 0, 方差 有 限时 (7.11) 
成 立 . 

下 列 定理 之 所 以 给 出 , 不 仅 因为 它 本 身 的 重要 性 , 而 且 因为 它 可 作为 改进 的 陶 
伯 定 理 的 应 用 的 一 个 例子 . 
定理 la 。 如 果 (7.11) 成 立 , 那么 


P{F>n}~ 大 去 (7.12) 


因此 ， 当 F 的 期 望 为 0, 方差 有 限时 , 分 布 {Tn} 很 类 似 于 在 二 项 随机 游 动 中 
过 到 的 分 布 . 
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证 由 (7.3) 我 们 看 到 , 当 s 一 工时 ， 


Vi=s sr 1 
mi) = [ees.>o- 引 一 c. (7.13) 
由 此 推出 和 
二 2 ~ (7.14) 
左边 是 (7.12) 中 的 概率 的 母 函 数 . 它们 单调 减少 , 从 而 根据 13.5 节 中 的 陶 伯 定理 5 
的 最 后 一 部 分 ，(7.12) 是 正确 的 . p 


定理 2 随机 游 动 趋向 -oo0,， 当 且 仅 当 


并 lp{s, >0} <o. (7.15) 
n=1 

当 把 {Sn > 0} 换 成 {Sn > 0} 时 ,这 个 准则 仍然 成 39. 
证 “为 使 随机 游 动 趋向 -oo, 当 且 仅 当 上 升 阶梯 过 程 是 终止 的 , 即 当 且 仅 当 色 的 
分 布 是 亏损 的 . 这 和 7(1) < 1 相同 . 在 这 种 情形 下 , 当 s 一 1 时 , (7.3) 的 两 边 是 有 
界 的 . 可 以 看 出 条 件 (7.5) 是 充分 必要 的 . 把 同样 的 论证 应 用 于 弱 阶 梯 时 刻 ,就 可 证 
明定 理 最 后 的 断言 . > 

我 们 知道 , 如 果 下 的 期 望 4 < 0, 那么 随机 游 动 就 趋向 -00, 但 是 jy < 0 列 含 
(7.15) 在 分 析 上 是 不 明显 的 . 这 个 事实 的 验证 提供 了 极 好 的 具有 方法 论 意义 的 技巧 
性 练习 . (见习 题 16. ) 

这 个 定理 有 意 想不到 的 含义 . 了 
例 (a) 设 己 是 严格 稳定 分 布 , 且 F(0) = 5 < 3. 直观 上 人 们 认为 随机 游 动 趋向 
oo, 但 是 事实 上 这 个 随机 游 动 是 振动 型 的 . 实际 上 级 数 (7.15) 可 化 为 1 -5 并 mn-1， 
因而 是 发 散 的. 于 是 到 是 正常 变量 . 但 是 同一 论证 也 适用 于 负 半 轴 ， 这 说 明 下 降 
阶梯 变量 及 也 是 正常 变量 . 
例 (b)” 设 下 表示 对 称 柯 西 分 布 ,考虑 变量 X/ = X + 1 产生 的 随机 游 动 ， 和 
S54 = Sn 十 n 的 中 位 数位 于 n 上 , 直观 上 人 们 认为 随机 游 动 应 很 快 地 趋向 oo. 实际 
上 概率 P{5% > 0} 也 是 和 n 无 关 的 ， 和 上 例 一 样 ， 我 们 断言 此 随机 游 动 是 振动 型 
的 . p 
定理 3 ”阶梯 时 刻 天 有 有 限期 望 ( 且 为 正常 变量 )， 当 且 仅 当 这 个 随机 游 动 趋向 
oo. 在 这 种 情形 下 


InE(F)=In km = Sp(s, < 0}. (7.16) 
n=1 


@ 我 们 将 看 到 , 在 任何 情况 下 都 有 于 nm“1P{Sn = 0} < oo[ 见 12.9 节 (co)]. 


12.8 反正 纹 定 律 ”367 


(在 所 有 其 他 情形 下 这 个 级 数 发 散 . ) 
证 从 ln(l-s- 中 减 去 (7.3) 的 两 边 , 我 们 得 到 : 对 于 0<s< 1， 


六 二 三 Th -Pp{s, > 9) (7.17) 


为 使 当 s 一 工时 左边 收敛 , 当 目 仅 当 到 是 正常 变量 且 有 有 限期 望 . 右边 趋 于 (7.16) 
的 右边 , 根据 定理 2, 为 使 这 个 级 数 收敛 , 当 且 仅 当 这 个 随机 游 动 趋向 oo. > 

最 后 我 们 指出 , 在 定理 1 中 出 现 的 母 函数 有 另 一 种 概率 解释 , 这 种 解释 将 直接 
导致 令 人 惊异 的 反正 弦 定律 . 


定理 4 概率 
pn = P{S1 > 0,52 > 0,.…, Sn > 0} (7.18) 
的 母 函数 ， 由 
，P(s) = 7 (7.19) 
给 出 ， 即 由 过 
Inp(s) = b FP{S, >0} (7.20) 
给 出 . 
由 对 称 性 , 概率 
gn = P{S1 < 0,.…,Sn < 0} (7.21) 
的 母 函 数 g 由 es 
Ing(s) = 2 SP{S» <0} (7.22) 
给 出 . (参阅 习题 21. ) 


证 我们 利用 12.2 节 的 对 偶 性 引 理 . 由 循环 事件 理论 可 见 ，(7.19) 是 n 为 阶梯 时 
刻 的 概率 pn 的 母 函 数 ， 即 


pn =P{Sn > So……,5n > Sn-1}. (7.23) 

颠倒 变量 Xi 的 次 序 , 我 们 就 得 到 对 侦 的 解释 (7.18). [实际 上 这 已 包含 在 工 = 页 55 

时 的 (2.1) 中 了 .] p> 
12.8 ”反正 弦 定 律 


掷 硬币 中 的 机 会 起 伏 的 意 想不到 的 特点 之 一 可 用 两 个 反正 弦 定 律 来 表达 (第 1 
卷 的 3.4 节 和 3.8 节 ). 其 中 第 1 个 说 明 序列 51,…, 5。 中 正 项 的 数目 接近 于 .0 或 
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n 的 可 能 性 要 比 接近 于 n/2 的 可 能 性 大 ,而 人 们 天 真 地 认为 正 项 的 数目 应 接近 于 
n/2. 第 2 个 说 明 对 最 大 项 的 位 置 也 有 同样 的 结论 成 立 . 现在 我 们 来 证 明 这 些 定律 
对 于 任意 对 称 分 布 和 许多 其 他 分 布 也 成 立 . 这 个 发 现 证 明了 第 1 卷 第 3 章 的 讨论 
的 中 肯 性 和 适用 性 . 

在 下 面 我 们 必须 处 理 这 样 的 麻烦 事 , 即 最 大 值 可 以 被 多 次 达到 , 部 分 和 可 以 等 
于 0. 如 果 FF 是 连续 的 , 那么 我 们 可 以 不 考虑 这 些 可 能 性 , 因为 此 时 任何 两 个 部 分 
和 相等 的 概率 为 0. (建议 读者 只 考虑 这 种 情形 . ) 对 于 一 般 理 论 ， 我 们 约定 考虑 第 
1 最 大 值 的 指标 , 即 这 样 的 指标 ,使 得 


Sk > 0, ,Sk > Sk-1, Sk > Sk+1,°**, Sk > Sn. (8.1) 


这 里 是 固定 的 , k 可 取 值 0,1,…n. 事件 (8.1) 一 定 对 某 个 < nn 发生， 因此 我 
们 可 以 把 (正常 的 ) 随机 变量 Kn 定义 为 第 1 个 最 大 值 的 指标 , 即使 (8.1) 发 生 的 指 
标 . 这 里 So = 0. 

事件 (8.1) 要 求 2 个 事件 {Sk > So,…,Sk > Sk-1} 和 {Sk+1 一 Sk < 0……Sn 一 
Sk < 0}, 同时 实现 . 第 1 个 只 涉及 到 Xi,…, Xk, 第 2 个 只 涉及 到 Xk+1,… ,Xn， 
从 而 2 个 事件 是 独立 的 , 但 是 这 些 事件 是 上 一 定理 中 出 现 的 事件 , 因此 我 们 证 明了 
引 理 1 对 于 所 有 的 k,n， 


P{Kn = k} = pkqn—k. (8.2) 
现在 假设 对 于 所 有 的 wP{Su > 0} = P{S, < 0} = 于 是 (7.15) 和 (7.17) 中 
的 有 边 化 为 二 mn(l 下 1， 从 而 
p(s) = q(s) = 1/VI—s. 


-1 _1 
Prgn-k = ( 2 ) ( 2 je (8.3) 
k nk 


这 可 改写 成 更 合适 的 形式 


2k 2n — 2k 1 
Prgn-k= |} 去 2 (8.4) 


这 个 表达 式 曾 在 第 1 卷 的 3.4 节 (4.1) 中 被 用 来 定义 离散 的 反正 弦 分 布 . 在 第 1 卷 
的 3.4 节 和 3.8 节 中 已 看 出 , 这 个 分 布 决定 了 与 搓 硬 币 有 关 的 各 种 随机 变量 ; 它 的 
极限 形式 是 在 第 1 卷 3.4 节 (4.4) 中 导出 的 . 特别 , 利用 第 1 卷 3.8 节 (f) 的 反正 弦 
定律 , 我 们 可 以 叙述 


于 是 
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定理 1 如 果 F 是 对 称 且 连 续 的 ， 那么 Kn(So,S1,…, Sn 中 第 一 个 最 大 值 的 指标 ) 的 
概率 分 布 和 搓 硬 币 游 戏 中 的 分 布 一 样 . 它 由 (8.3) 或 (8.4) 给 出 . 对 固定 的 0 < a < 1， 
当 一 oo 时 ， 

P{Kn <mnalj 一 2. Tarcsin Va. (8.5) 


极限 分 布 的 密度 1/fxVal1 一 a]] 在 两 端点 0 和 1 上 是 无 界 的 ， 并 且 在 中 点 3 
上 取得 最 小 值 这 说 明 约 化 最 大 值 Ka/n 接近 于 0 或 1 的 可 能 性 要 比 接近 于 3 的 


可 能 性 大 . 关于 更 充分 的 讨论 见 第 1 卷 的 3.4 节 和 3.8 节 . 关于 这 个 定理 的 另 一 种 
形式 见习 题 22. 


正如 上 节 定理 1 那样, 这 个 定理 也 可 以 推广 . 
定理 la@ 如 果 级 数 


Dt [Pts.>o- 引 =。 (6.6) 

学 

收 化 那么 当 m 一 o0,n 一 大 -oo 时 ， 
P{Kn =k} ~ 的 各 站 本 去. (8.7) 


从 而 反正 强 定 律 (8.5) 成 立 . 

在 18.5 节 中 将 证 明 , 当 FF 的 期 望 为 0, 方差 有 限时 ,级 数 (8.6) 收敛 . 因此 ,反正 弦 定 
律 对 这 样 的 分 布 都 成 立 . 
证 由 (7.20) 和 阿 贝 尔 关于 短 级 数 的 基本 定理 , 我 们 可 得 , 当 s 一 1 时 ， 


ln(p(s)VI= = 三 全 [ees, >0}- 站 和 (8.8) 
因此 
p(s) ~ er.(1—s)-$. (8.9) 


根据 定义 (7.18), pn 单调 减少 , 从 而 13.5 节 的 陶 伯 定 理 5 的 最 后 一 部 分 蕴含 , (8.9) 中 两 个 
竺 级 数 的 系数 有 相同 的 渐 近 性 质 . 于 是 


1 
we 人 = jc nm oo. (8.10) 
n 


对 于 gn 我 们 可 得 到 同样 的 关系 式 (把 c 换 成 -c), 从 而 断言 (8.7) 可 由 (8.2) 推出 . 反 
正弦 定律 的 推导 只 依 束 于 渐 近 关系 式 (8.7) 而 不 依赖 于 恒等式 (8.4). > 


@ 斯 帕 里 安德森 用 麻烦 的 计算 证 明了 这 个 定理 ， 陶 伯 定理 可 以 消除 所 有 的 麻烦 这 一 说 明 应 归功 于 斯 
皮 策 尔 . 关于 推广 见 12.9 节 (d). 
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定理 1 及 其 证 明 可 照搬 到 任意 的 严格 稳定 分 布 上 去 . 如 果 P{Sn > 0} = 5 与 n 无 关 ， 
那么 我 们 可 以 从 《7.20) 和 (7.22) 推出 


p(s)=(1— ss), gq(s)=(1— 8), (8.11) 


从 而 
P{Kn = k} = prgn-» = (—1)™ (® 人 四 和 > (8.12) 
把 (8.5) 右边 的 反正 弦 分 布 换 成 具有 密度 
ee . 0<z<1 (8.13) 


nT) 


的 分 布 , 极限 定理 (8.5) 也 成 立 . 定理 la 可 以 搬 到 属于 一 个 稳定 分 布 的 吸引 域 的 分 布 上 去 . 

在 第 1 卷 第 3 章 中 我 们 必须 分 别 证 明 两 个 反正 弦 定 律 , 但 是 下 列 定理 说 明 , 它 
们 是 等 价 的 . (关于 连续 分 布 的 ) 定理 2 是 E. 斯 帕 里 : 安德森 引进 讨论 起 伏 理论 的 
新 方法 进行 研究 的 出 发 点 . 原来 的 证 明 是 非常 复杂 的 . 现在 有 儿 种 证 明 , 但 下 列 证 
明 似 乎 是 最 简单 的 . 
定理 2 ”51,.…,5n 中 严格 为 正 的 项 的 数目 11, 和 KK 有 相同 的 分 布 (8.2)，Kn 是 
So = 0,51,…,Sn 中 第 1 个 最 大 值 的 指标 . 

(见习 题 23. ) 

这 个 定理 将 化 成 一 个 纯粹 的 组 合 引 理 . 设 z1,… ,zn 是 n 上 任意 的 (不 一 定 不 
相等 的 ) 实数 , 令 


80 一 0， sk 一 Z1 十 … 十 ZK. (8.14) 


s0, 81,…, Sn 中 的 最 大 值 可 被 重复 地 达到 , 因此 我 们 应 该 区 别 第 1 和 最 后 一 个 最 大 
项 的 指标 . 
现在 考虑 nl 个 排列 zi,，,…,zi,( 其 中 一 些 排列 可 能 有 相同 的 外 形 ). 我 们 把 每 个 
排列 与 它 的 n+ 1 个 部 分 和 0,z6，… ,za 十 … 十 zi 联系 起 来 
例 (a) 令 z1=z2=1,73=z4= 一 1. 只 有 6 个 重新 排列 {zi,…,zi} 是 可 区 别 
的 , 但 是 每 一 个 都 表示 下 标的 4 个 排列 . 在 排列 (1,1, 一 1, 一 1) 中 3 个 部 分 和 是 严格 
为 正 的 , (唯一 的 ) 最 大 值 发 生 在 第 3 个 位 置 上 . 在 排列 (-1, 一 1,1,1) 中 没有 一 个 和 
是 正 的 , 但 是 最 后 一 个 部 分 和 为 0. 第 1 个 最 大 值 的 指标 为 0, 最 后 一 个 最 大 值 的 
指标 为 4. > 
我 们 将 证 明定 理 2 是 下 列 引 理 的 一 个 简单 推论 . 
引 理 2 设 r 是 一 个 整数 0<r<n. 答 有 7 个 严格 为 正 的 部 分 和 的 排列 的 数目 4r 
等 于 这 样 的 排列 的 数目 BB., 使 得 在 其 部 分 和 中 的 第 1 个 最 大 值 发 生 在 位 置 7 上 . 
(见习 题 24. ) 
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证 @ 我 们 利用 归纳 法 进行 证 明 ， 断 言 对 于 n = 1 是 正确 的 ， 因 为 z: > 0 列 含 
机 =Bi=1 和 4h0=Bo=0, 而 z<0 蕴 含 41= Bi=0 和 ho= Bo=1. 假设 当 
把 nn 换 成 n 一 1> 1 时 引 理 是 正确 的 . 用 AK) 和 BK 来 表示 把 n 元 组 (z1,…, zn) 
换 成 通过 去 掉 zx 而 得 到 的 (n 一 1) 元 组 时 对 应 于 4- 和 Br 的 数 . 于 是 归纳 法 假设 
说 明 对 于 1<k<n 和 "7+=0,…,n 一 1,4 由 = B9. 这 时 7 二 n 也 正确 , 因为 显然 
有 4 = BO =0. 

(a) 假设 zl: + … 二 zk 和 0. (z1,…,zn) 的 nl 个 排列 是 通过 在 最 后 一 个 位 置 上 
选择 zk 并 交换 其 余 n 一 1 个 元 素 而 得 到 的 . 第 n 个 部 分 和 < 0. 显然 , 正 部 分 和 的 
个 数 以 及 第 1 个 最 大 项 的 指标 只 依赖 于 前 n 一 1 个 元 素 . 于 是 


4h= bp3 AW, B= Yat), (8.15) 
k=1 k=1 
从 而 根据 归纳 法 假设 有 4v = B,. 
(b) 假设 zi 十 … 十 zn > 0. 于 是 第 n 个 部 分 和 是 正 的 , 前 面 的 论证 说 明 现在 有 


n 


和 一》 40,. (8.16) 
k=1 
为 了 得 到 Br 的 类 似 的 递 推 公式 , 考虑 从 zx 开始 的 重新 排列 (zk,2j,，…,2;,-,). 因 
为 第 nn 个 部 分 和 是 正 的 , 所 以 部 分 和 的 最 大 项 的 下 标 为 正 . 显然 , 为 使 第 1 个 最 大 
值 发 生 在 位 置 "(1 < + < n) 上 , 当 且 仅 当 (zj…zjn-:) 的 部 分 和 的 第 1 个 最 大 值 
发 生 在 位 置 " 一 1. 因此 ， 


n 
B= 》 BO (8.17) 
k=1 


比较 (8.16) 和 (8.17) 又 可 看 到 4. = B,, 这 就 完成 了 证 明 . > 
我 们 很 快 可 以 看 到 , 利用 这 个 论证 可 得 到 进一步 的 结果 , 但 是 我 们 先 回 到 
定理 1 的 证 明 ”我 们 按照 12.7 节 中 定理 1 的 证 明 那 样 进行 . 考虑 由 个 排列 
(za，…zin)， 并 且 这 样 给 它们 编号 ， 使 得 自然 次 序 (z1,… zn) 为 第 一 个 .对 于 固 
定 的 整数 0 < r < n, 如 果 第 v 个 排列 恰 有 7 个 正 部 分 和 , 那么 定义 YW = 1, 否则 


@ 下 述 证 明 应 归于 英国 伯 明 办 的 约 塞 夫 (A. W. Joseph) 先 生 . 如 果 人 们 还 记得 斯 帕 里 .安德森 在 1949 
年 发 现 定 理 2 是 一 个 令 人 难以 置信 的 变动 一 时 的 事件 的 话 ， 那 么 这 个 证 明 的 极端 简明 性 差不多 是 
令 人 震惊 的 , 原来 的 证 明 是 非常 复杂 的 . 本 书 作者 把 它 化 成 纯粹 的 组 合 引 理 2 并 给 出 它 的 初等 证 明 . 
( 见 本 书 第 1 版 . ) 约 塞 夫 的 证 明 不 仅 比 较 简单 ,而 且 它 是 第 一 个 建立 了 两 类 排列 之 间 的 一 一 对 应 
的 构造 性 证 明 . 我 们 在 引 理 3 中 关于 这 方面 的 讨论 利用 了 英国 伦敦 的 比 慈 利 (M. T. L. Bizley) 先 


生 的 想法 . 作者 感谢 约 塞 夫 和 比 兹 利 允 许 他 利用 他 们 未 发 表 的 结果 (是 在 打字 原稿 已 交 给 印刷 商 时 
告知 作者 的 )- 
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定义 Y@) = 0. 由 对 称 性 , 这 nl! 个 随机 变量 有 相同 的 分 布 , 从 而 
P{K, =7} =P{Y® =1} =E(YW)= 吉 导 ECO)， (8.18) 


类 似 地 3 
P{Kn = 个 = 责 DE(Z™). (8.19) 


其 中 ， 如 果 在 第 v 个 排列 中 第 一 个 最 大 部 分 和 的 指标 为 ">， 那 么 Z0) = 1， 否则 
24) = 0. 根据 上 一 引 理 , 冰 YG) 与 半 20) 是 恒 等 的 , 因此 (8.18) 和 (8.19) 中 的 概 
率 是 相同 的 . p> 
关于 斯 帕 里 . 安德森 变换 的 注 由 引 理 2 推出 , 存在 一 种 变换 ， 它 把 每 个 n 元 实 
数组 (z1,… ,zn) 以 这 样 的 方式 映 到 一 个 重新 排列 (zi,，,…, zi,) 上 去 ，(i) 如果 在 
(8.14) 的 部 分 和 sk 中 恰 有 7r(0 < r < n) 个 是 严格 正 的 , 那么 使 (zi,，… ,zi,) 的 部 
分 和 首次 达到 最 大 值 的 指标 是 >; (ii) 这 个 变换 是 可 逆 的 (或 者 一 对 一 的 ). 这 样 的 
变换 称 为 斯 帕 里 . 安德森 变换 ， 虽 然 他 讨论 的 是 独立 随机 变量 , 而 且 不 知道 可 以 把 
定理 2 化 成 一 个 纯粹 组 合 引 理 2. 细 读 引 理 2 的 证 明 可 以 看 出 它 实际 上 包含 着 一 
个 斯 帕 里 ， 安德森 变换 的 一 种 构造 方法 ， 这 个 程序 是 递 推 的 ， 第 1 步 由 下 述 规则 
给 出 : 如 果 sn < 0,， 那么 不 改变 n 元 数组 (z1,…,zn), 但 是 如 果 sn > 0, 那么 把 
它 换 成 循环 重 排 (zn,z1,…, zn-1). 第 2 步 是 把 同样 的 规则 应 用 于 (n - 1) 元 数组 
(z1,…，,zTn-1). 所 需要 的 重新 排列 (zi,，…, zi,) 可 在 第 n 一 1 步 后 得 到 . 
例 (b) 设 (z1,…,ze) ==(-1,2, 一 1,1,1, 一 2). 第 1 步 不 发 生变 化 ,而 第 2 步 导 致 
(1, 一 1,2, 一 1,1, 一 2). 因为 54 = 1, 第 3 步 得 到 (1,1, 一 1,2, 一 1, 2) ， 第 4 步 不 发 生 
变化 , 因为 5 = 0. 由 于 52 = 1, 所 以 最 后 一 步 导 致 重新 排列 (1,1,2, -1, -1,2). 部 
分 和 的 唯一 最 大 值 发 生 在 第 3 个 位 置 上 , 在 原来 的 排列 中 恰好 3 个 部 分 和 是 正 的 . 
例 (c) ”假设 对 于 所 有 的 j, z; < 0. zi 的 初始 排列 和 最 后 排列 是 相同 的 . 没有 一 个 
部 分 和 是 正 的 , so = 0 是 最 大 值 (如 果 zi = 0, 那么 这 个 最 大 值 被 重复 ). > 
最 好 把 上 述 递 推 构造 换 成 对 最 后 结果 的 直接 描述 ， 我 们 在 下 列 引 理 中 给 出 这 
种 描述 . 由 于 它 本 身 的 重要 性 , 我 们 给 出 一 个 不 依赖 于 上 一 引 理 的 新 证 明 . ( 亦 见 习 
题 24. ) 
引 理 3 设 (zl …zn) 是 这 样 的 n 元 实数 组 , 使 得 部 分 和 3,,，,"…,sv, 是 正 的 ， 并 
且 其 他 所 有 的 部 分 和 是 负 的 或 0; 这 里 切 >> 如 >…>Vr>0. 先 写 下 Tos)Toss 
然后 把 其 余 的 zj 按 自 然 顺 序 写 在 后 面 . (如 果 所 有 的 部 分 和 < 0, 那么 7 二 0 且 次 
序 保 持 不 变 . ) 在 新 的 排列 中 ， 部 分 和 的 最 大 值 中 的 第 1 个 发 生 在 第 7 个 位 置 上 ， 
并 且 这 样 定义 的 变换 是 一 对 一 的 、 
证 用 (61,…,én) 表 示 新 排列 , 用 oo0,-… ,on 表示 它 的 部 分 和 . 对 于 每 个 下 标 了 < mw， 
存在 唯一 的 一 个 下 标 k, 使 得 6 = zk. 特别 , 6&1,… ,+ 和 按 上 述 次 序 的 zw，…,zwr 
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一 致 . 
首先 考虑 使 se < 0 的 j. 从 其 构造 显然 可 见 j > k， 且 元 素 与 -x+ ,5 是 
Zz1,…,Zk 的 一 个 排列 , 于 是 oj = 0j-k 十 sk < oj-k， 因 此 oj 不 可 能 是 第 1 个 最 大 
的 部 分 和 . 

如 果 7 = 0, 那么 在 了 = 0 时 达到 oj 中 的 第 1 个 最 大 值 . 当 r > 0 时 , 第 1 个 
最 大 值 发 生 在 位 置 0,1,…,r 之 一 上 , 我 们 来 证 明 只 有 r 是 可 能 的 . 实际 上 , 如 果 
j 了 <r, 那么 由 其 构造 可 以 推出 , vj; 个 元 素 56,… ,6j_1+v; 和 (z1,… ,zwvj) 的 某 个 重 
排 一 致 .于 是 0j-14vi = oj-1+ suj > 0;-1, 从 而 在 位 置 一 1 上 不 可 能 达到 最 大 值 . 

为 了 完成 引 理 的 证 明 ， 只 需 证 明 变换 是 一 对 一 的 就 行 了 . 事实 上 , &1,…,&n 之 
北 可 以 利用 下 列 递 推 法 则 来 构造 . 如果 所 有 的 oj < 0, 那么 不 改变 这 个 排列 . 否则 ， 
令 上 是 使 ck > 0 的 最 大 下 标 . 把 (&1,…,&n) 换 成 (2，… Ek,&1,5k+1,… én), 并 把 
同一 程序 应 用 于 (k 一 1) 元 数组 (€2,…,ék). p> 


关于 可 交换 变量 的 注 ”应 当 注 意 到 这 个 证 明 不 依赖 于 变量 Xi 的 独立 性 , 而 只 依赖 于 nl 
个 排列 (Xi,，,……, Xi) 中 所 有 的 排列 的 联合 分 布 是 相等 的 这 个 事实 . 换 句 话说 , 定理 2 对 
于 可 交换 变量 的 每 个 n 元 组 仍然 成 立 (7.4 节 )， 虽 然 Kn 和 IZn 的 共同 分 布 自然 要 依赖 于 
Xi 的 联合 分 布 ， 作 为 一 个 有 趣 的 例子 ， 设 X1,X2,… 是 有 共同 分 布 下 的 独立 变量 ， 并 令 
Yi =X -Sn/n( 其 中 大 = 1,2,…,n). 变量 再 ,3 是 可 交换 的 , 它们 的 部 分 和 是 

了 =5k—kSn/n; k=l, ,nl. (8.20) 
参阅 (So, S51,…, 5n) 的 图 形 , 我 们 可 以 把 世 看 作 顶 点 Ss 到 联结 原点 和 端点 (n, Sn) 的 弦 
的 垂直 距离 - 

我 们 现在 假设 下 是 连续 的 (为 了 避免 区 别 第 1 个 和 最 后 1 个 最 大 值 ). 在 诸 项 0, 马 ，…， 
马 -: 中 以 概率 1 存在 唯一 的 1 个 最 大 值 . 对 于 循环 重 排 (Y2,…,Y。, Yi) 有 相应 的 部 分 和 
0, 品 - 马 ，……， 吕 -1 一 马 ,- 马 , 并 且 很 明显 , 最 大 值 的 位 置 按 循环 的 次 序 向 前 移动 1 个 位 
置 . (如 果 原 来 的 最 大 值 在 第 0 个 位 置 上 , 那么 对 于 大 = 1,…,n 一 1, < 0, 并 且 新 的 最 大 
值 在 位 置 n 一 1 上 . ) 因此 , 在 这 n 个 循环 排列 中 , 在 每 个 位 置 上 恰 取 1 次 最 大 值 ， 它 的 位 
置 均匀 地 分 布 在 0,1,…,n 一 1 上. 因此 ,我 们 有 下 列 应 归功 于 斯 帕 里 ， 安德森 的 且 与 第 1 
卷 3.9 节 中 定理 3 有 关 的 定理 . 

定理 3 在 具有 连续 分 布 F 的 任 一 随机 游 动 中 ， 对 任 一 n, S1,…,Sn 中 位 于 从 (0,0) 到 
(m, Sn) 的 强 之 上 的 顶点 的 个 数 均匀 地 分 布 在 0, 1,.…,n 一 1 上 . 
(这 对 于 有 最 大 距离 的 顶点 的 指标 也 成 立 . ) 


12.9 杂 录 


(a) ”联合 分 布 
只 要 把 导致 12.7 节 定 理 1 的 论证 做 记号 上 的 改变 , 就 可 用 来 推导 阶梯 变革 的 
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联合 分 布 . 改变 12.1 节 的 记号 , 设 了 是 而 55 中 的 区 间 , 用 及 4 {7} 表示 "是 第 r 个 
阶梯 时 刻 且 Sn E I 的 概率 . 令 


H{1,S} = {1), 0<s<l1. (9.1) 
n=1 
对 固定 的 s 利用 归纳 法 可 得 
H**{1,s} = 立 s"HO{T). (9.2) 
n=1 


利用 导致 (7.3) 的 论证 不 难得 到 下 述 应 归于 巴克 斯 特 (G. Baxter) 的 结果 ， 当 了 = 
Deo 时 , 它 化 为 (7.3). 
定理 对 于 TCDeco 和 0<s<1， 
lr sn 
2 iH*{1,s} = 之 元 P{Sn EN). (9.3) 
更 简单 和 更 容易 处 理 的 形式 将 在 18.3 节 中 导出 . 
(b) “ 母 函 数 的 死亡 率 解释 
下 列 解释 可 帮助 直观 理解 和 简化 形式 上 的 计算 . 对 于 满足 0 < s < 1 的 固定 的 
s， 考 虑 一 个 亏损 随机 游 动 , 它 在 每 一 步 以 1 - s 的 概率 中 止 , 否则 就 服从 分 布 sF". 
于 是 s"F"*{T} 是 在 时 刻 n 位 于 工 中 的 概率 . 亏 基 1 - s" 表示 在 n 前 终止 的 概率 . 
除了 所 有 的 分 布 都 变 成 亏损 分 布 外 , 所 有 的 考虑 可 以 毫 不 改变 地 搬 过 来 . 特别 , 在 
具有 死亡 率 的 随机 游 动 中 ，(9.1) 是 第 一 个 阶梯 高 度 的 分 布 ，(9.2) 与 9.2 节 和 9.3 
节 中 的 H"* 类 似 . 于 是 母 函 数 7(s) 等 于 发 生 阶 梯 指 标的 概率 . 
(c) ”循环 事件 
{S$1 < 0,.…., Sn-1 < 0, 5n = 0} (9.4) 


表示 在 预先 没有 进入 过 右 半 轴 的 情况 下 返回 原点 . 我们 曾 在 第 1 节 弱 阶梯 变量 的 
定义 中 考虑 过 它 . 用 wn 表示 事件 (9.4) 在 时 刻 n 首次 发 生 的 概率 ， 即 


wn = P{S1 <0,.…, Sn-1 <0,5n =0}. (9.5) 


如 果 w(s) = 于 ursr， 那么 wr 是 第 7 次 发 生 的 母 函 数 ， 从 而 1/[1 -- w(s)] 是 概率 
(9.4) 的 母 函数 (7.3) 的 证 明 的 简化 形式 可 导致 基本 恒等式 


1 Cs" 
mn I > 元 P{Sn =0)- (9.6) 


n=1 
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把 此 式 和 (7.3)、(7.16)、(7.22) 等 进行 比较 , 我 们 可 以 看 出 , 从 弱 阶梯 变量 过 渡 到 严 
格 阶梯 变量 以 及 从 严格 阶梯 变量 过 渡 到 弱 阶 梯 变 量 是 多 么 地 容易 . 公式 (9.6) 也 证 
实 了 12.1 节 中 的 下 列 陈 述 : 如 果 (9.4) 中 的 所 有 不 等 号 都 改变 方向 , 那么 (9.4) 的 
概率 仍然 不 变 . 

(d) 向 任意 区 间 的 推广 

利用 明显 的 记号 改变 , 就 可 把 12.3 节 的 理论 推广 到 把 页 co 换 成 任意 区 间 4 并 
把 -co,0 换 成 余 集 4' 的 情形 . 特别 , 维 纳 - 霍 普 夫 积分 方程 保持 不 变 . 请 读者 详细 
地 研究 其 细节 ; 它们 将 在 18.1 节 中 被 充分 地 讨论 . (也 见习 题 15. ) 


12.10 习 题 


1. 在 二 项 随机 游 动 [12.2 节 例 (b)] 中 , 设 ex 是 这 样 的 指标 n > 0 的 平均 个 数 ， 使 得 
Sn 二 上 ,51 > 0…,Sn-1> 0( 在 第 1 次 取 负 值 之 前 到 达 k). 用 f 表示 到 达 -1 的 概率 ， 
即 如 果 9 > p, 那么 f=1, 否则 f = 9/p. 取 点 (1, 1) 为 新 原点 , 证 明 : eo = 1 二 pfeo 
且 对 于 > 1, ek = plek-1 十 fex). 证 明 : 对 于 > 0， 
当 p>4 时 ek p71, 当 p<g 时 ex = (p/g)*o-:. 
2. ( 续 ) 对 于 > 1， 令 ax 是 这 样 的 指标 n > 1 的 平均 个 数 ， 使 得 Sn = k,S1 > 
0,…,Sn-1 > 0 (在 首次 返回 原点 之 前 到 达 k). 证 明 ak = pek-1, 从 而 
当 p>g 时 axk=1, 当 p<g 时 ax = (p/q)*. 
这 就 给 出 了 12.2 节 例 (b) 中 的 似乎 自 相 矛盾 的 结果 的 一 个 直接 的 证 明 . 
注 下 列 习题 3 ~ 习题 6 可 以 作为 本 章 的 问题 的 导 引 ， 在 学 习 本 章 前 就 可 以 解答 它 
们 . 它们 也 给 基本 积分 方程 的 显 式 解 提供 了 例子 . 此 外 , 它们 说 明了 和 母 函 数 的 威力 和 优 
美 [ 试 直接 解 方 程 (0 
3. 随机 游 动 的 变量 Xe 有 这 样 一 个 共同 的 算术 分 布 , 它 对 整数 1, 2, 赋予 概率 有 1, f2,…， 
对 -1 赋予 概率 gq( 其 中 g 十 及 十 户 十 … 二 1. ) 用 和 r(r = 1,2…) 表示 序列 51,52,… 
的 第 1 个 正 项 的 值 为 > 的 概率 . ( 换 句 话说 , {和 +.} 是 第 1 个 阶梯 高 度 的 分 布 ，) 证 明 ， 
(a) 和 r 满足 递 推 关系 式 


sy 0) 
(b) 母 函 数 满足 
X90) =1- 区 二 2 0<s<1 (2) 
(c) 如 果 E(Xk) = p= 了 (1) 一 9 > 0, 那么 方程 
f(s)+q/s=1 (3) 


存在 唯一 的 一 个 根 0 < c < 1 
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利用 入 在 1 上 应 是 单调 的 且 < 1 这 个 事实 来 证 明 
MGa) = sz 一 fo). (9) 
9 


s—o 
这 等 价 于 
和 = De (5) 
(d) 如 果 E(Xx) < 0, 那么 在 (2) 中 令 Xi = (1 一 g)/q 就 可 得 到 一 个 合适 的 解 . 于 是 (4) 
和 (5) 对 于 o = 1 成立 . 
4. 对 弱 阶梯 高 度 改 述 上 题 换 句 话 说 , 我 们 不 考虑 和 +, 而 考 虚 51, Sa,… 的 第 一 个 非 负 
项 的 值 为 7 的 概率 (r = 0,1,…). 证 明 : (1) 和 (4) 可 以 换 成 


w= 所 二 Tt (1a) 


vs) =1- 2 +sf 一 fo). (4a) 


3 一 0 


5. 在 习题 3 的 随机 游 动 中 (但 不 利用 习题 3) 令 z 是 对 于 某 个 n, 有 Sn < 0 的 概率 . 证 
明 : z 满足 方程 (3), 从 而 = = 0. 

6. 续 ， 证 明 对 于 某 个 n > 0,， 有 Sn < 0 的 概率 是 9+f(o) = 1-glo 一 1). 验 
证 , (1) = polq(1 - o)]-: ,这 是 关系 式 (2.8)( 或 瓦尔 德 方程 ) 的 一 个 特殊 情形 . 

7. 试 由 (1.12) 利用 直接 计算 来 推导 (1.13). 


8. 到达 概 率 , 对 于 + > 0 和 > 0, 用 G(t,é) 表示 超过 t+ 的 第 1 个 和 Sn <t 十 6 的 概率 . 
证 明 : G 满足 积分 方程 


ck9=Ft+9-FO+ {otray). 


在 解 不 唯一 的 情形 下 , G 是 最 小 解 . 阶梯 高 度 的 分 布 五 唯一 地 由 五 (5) = G(0,€) 所 确 
定 . 
9. 令 是 集中 于 而 06 上 的 连续 概率 分 布 , H” 是 集中 于 二 05,0 上 的 可 能 为 亏损 的 连续 
分 布 . 假设 

H+H-—- HAH =F (6) 
是 概率 分 布 . 由 12.3 节 的 唯一 性 定理 可 推出 , H 和 已 ”是 在 FF 产生 的 随机 游 动 中 首 
次 进入 点 9 和 站” 的 分 布 . 用 这 种 方法 可 以 得 到 FF 的 形 如 (6) 的 明显 表达 式 . 当 
0<gq<g1, 并 且 吾 和 五 ”的 密度 由 
(a) be-o, 对 z>0 9 对 -1<z<0， 

或 
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i 
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国 


已 
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(b) b71, 对 0<z<b;g, 对 一 1<Zz<0 定 义 时 , 情况 就 是 如 此 . 在 (a) 的 情形 下 分 布 
密度 为 
(b—-qe “+ge "+t), z>0, 
f(z) 
Tt -1<z<0. 
在 (b) 的 情形 下 , 如 果 5 > 1, 那么 下 的 密度 为 
qi(1+z)，-1<z<0 
f(z) = 95 0<z<b-—l; 
gb-1(b—z), b-l1<z<b. 


在 任 一 情形 下 , 为 使 F 的 期 望 为 0, 当 且 仅 当 g = 1. 
, 由 (3.11) 证 明 : 如 果 五 和 五 ”是 正常 分 布 , 并 且 方 差 有 限 , 则 E(X1) =0 且 E(X?) = 
—2E()E(H"). 
“瓦尔 德 关系 式 (2.8) 的 分 析 证 明 . 利用 (3.11) 分 别 对 > > 0 和 = < 0 证明: 


0+ 
1— Flo) = -pO -H+ {plav}lale —) — Ha), 


Fa= /anh Bee) 


证 明 , 为 使 F 的 期 望 x > 0, 当 上 且 仅 当 H 有 有 限期 望 v 且 p(0) < 1. 通过 在 05,055 
上 的 积分 证 明 : 4 = [1 一 p(0)]v, 这 等 价 于 (2.8). 
. 与 12.4 节 例 (c) 有 关 的 问题 . 如 果 /> 0, 那么 分 母 有 一 个 正 根 so < 1, 恰 有 5 一 1 个 
复 根 在 |s| < so 中 , a 一 1 个 复 根 在 |s| > 1 中 . 把 s 变 成 1/s 就 可 描述 上 < 0 的 情况 . 
12.4 节 例 (c) 中 上 升 阶梯 高 度 的 分 布 的 母 函数 为 


Xx(s) =1— (1—s)(1— s/01):…(1— s/ca_1). 


对 于 下 降 阶 梯 高 度 ， 把 s/ok 变 成 s/s 即 可 . 
. 与 12.4 节 例 (c) 有 关 的 问题 . 假设 X; 取 值 -2, 一 1,0,1,2 的 概率 都 是 1/5. 证 明 , 上 升 
阶梯 高 度 的 分 布 为 
_1+V5 


2 
3+Vi 3+V5. 
对 于 遇 高 度 , io 二 古 (7 一 VB), 叉 = 而 (L+ V5), 和 = 二 
,在 12.4 节 例 (c) 中 用 必 ” 表 示 前 n 步 走 不 出 区 间 =B, 甩 而 第 n 步 到 达 大 的 概率 . (于 
是 对 上 > 4 和 上 大 < 一 B,WY = 0. 照例 , 当 上 =0 时 0 二 1, 否则 0 = 0. ) 令 


Ye = 学 吴 ”是 离开 一 B,4 之 前 在 上 上 逗留 的 平均 次 数 . 证 明 


A 


A 
br= 》 hf-vt+ yp , -BK<k<A, 


v=-B 
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18. 
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并 且 对 于 上 > 4 和 大 < 一 B， 


是 首次 跑 出 区 间 一 B, 4 的 点 到 达 大 的 概率 . [这 个 问题 在 序 贯 分 析 中 是 很 重要 的 , 它 说 
明了 12.9 节 (d) 中 所 述 的 情况 . ] 

12.7 节 的 定理 2 蕴含 , 如 果 p< 0, 那么 于 nm!P{S，> 0} < oo. 试 补足 下 列 的 直接 
证 明 . 内需 证 明 ( 切 比 雪夫 ) 


/ry < 下/ rn < 


第 1 个 关系 式 是 显然 的 . 为 了 证 明 第 2 个 关系 式 , 把 积分 记 为 在 个 区 间 k 一 1 < jy| < 
kk(k = 1,…,n) 上 的 积分 之 和 . 颠倒 求 和 的 次 序 , 证 明 : 整个 级 数 < 2E(|X|). 
对 于 掷 硬币 游戏 , 证 明 ， 
2 
» TP{Sn=0}= bg TFT 
提示 : 注意 到 左边 可 以 写成 [(1 一 2?)-# - 1jz-1 在 '0,s 上 的 积分 ,证明 是 很 容易 的 . 
假设 随机 游 动 是 瞬时 的 ， 即 对 于 每 个 有 界 区 间 工 ， 


U{T} = 三 F™*{I} < oo. 
5 


用 12.3 节 的 记号 , 设 $= 时 om 证 明 更 新 方程 
U= $+URH 


的 正确 性 . 如 果 4- 是 4 在 负 半 轴 上 的 类 似 测度 ， 那 么 和 在 1.13) 中 一 样 ，w- = 
(0 
证 明 


= 1 mL 
U= ery 


并 证 明 这 等 价 于 维 纳 - 稚 普 夫 分 解 式 (3.12). 


}. 试 直接 由 习题 18 中 的 更 新 方程 推导 瓦尔 德 恒等式 


E(%) = E(F)E(X1). 
与 12.7 节 的 定理 4 有 关 的 问题 . 概率 p; = P{S1 > 0,…,Sn >0} 和 =P{S! < 
0,…,Sn < 0} 的 母 函 数 为 


hp = DEP{s, > 0), 


n=1 


Ing’(s)= pb Pp{s, < 0}. 


n=1 
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22. 关于 最 后 一 个 最 大 值 .我 们 不 考虑 12.8 节 中 的 变量 Kn, 而 考虑 部 分 和 So,…，,Sn 的 
最 后 一 个 最 大 值 的 指标 Kz. 利用 上 题 的 记号 , 证 明 


P{K = k} = pkgn—k. 
23，12.8 节 定 理 2 的 另 一 形式 . So,…, Sn 中 非 负 项 的 数目 人 [的 分 布 和 上 是 中 的 变量 KK 的 
分 布 相同 . 应 用 定理 2 于 (一 Xn, 一 Xn-1,… ,一 X1) 来 证 明 这 个 结论 . 
24. 如 果 把 So,……,Sn 中 第 1 个 最 大 值 换 成 最 后 一 个 最 大 值 ， 并 把 正 部 分 和 的 个 数 换 成 


51,…,Sn( 除 去 So = 0) 中 非 负 项 的 个 数 , 那么 12.8 节 的 组 合 引 理 2 仍然 成 立 . 除了 
不 等 号 的 明显 改变 外 , 证 明 是 相同 的 . 引 理 3 可 以 同样 的 方式 搬 过 来 . 


第 13 章 “” 拉 普 拉 斯 变换 , 陶 伯 定理 , 预 解 式 


拉 普 拉 斯 变换 是 一 种 强 有 力 的 工具 ,但 同时 它们 的 理论 的 本 身 也 有 其 内 在 价 
值 ， 并 为 其 他 理论 (例如 半 群 理论 ) 开 避 道路 . 完全 单调 函数 定理 和 陶 伯 基 本 定理 
一 直 被 认为 是 硬 分 析 的 明珠 (虽然 现在 的 证 明 是 简单 初等 的 , 但 是 这 方面 的 先驱 
工作 却 需要 独创 性 和 才能 . ) 预 解 式 (13.9 节 和 13.10 节 ) 是 半 群 理论 的 基础 . 

因为 本 章 必须 适应 各 种 各 样 的 需要 ， 所 以 为 了 在 本 章 题目 所 容许 的 范围 内 尽 
基 使 各 部 分 保持 独立 ， 并 且 尽 可 能 省 略 其 细节 ， 我 作 了 很 大 的 努力 . 第 14 章 可 以 
作为 课外 读物 并 且 可 以 提供 例子 . 本 书 的 其 余部 分 完全 和 本 章 无 关 . 

尽管 经 常 出 现 正则 变化 函数 , 但 是 我 们 只 用 到 了 8.8 节 中 十 分 初等 的 定理 1. 


13.1 ”定义 , 连续 性 定理 


定义 1 如 果 F 是 集中 于 0,co 上 的 正常 概率 分 布 或 亏损 概率 分 布 ， 那 么 下 的 拉 普 
拉 斯 变换 p 是 由 


oO) = / exp{dr}, A>0, (GD 


所 定义 的 函数 . 从 今 以 后 我 们 认为 积分 区 间 是 闭 的 (并 且 可 以 换 成 =coyso). 每 当 我 
们 谈 到 分 布 的 拉 普 拉 斯 变换 时 ,我们 自然 认为 是 集中 于 0,05 上 的 . 与 通常 一 
样 ,我们 延伸 语言 , 谈 及 “随机 变量 X 的 拉 普 拉 斯 变换 *， 其 含义 是 它 的 分 布 的 变 
换 . 于 是 利用 普通 的 期 望 的 记号 , 我 们 有 


PO) = Elerxx). (1.2) 


例 (a) 设 义 以 概率 po,p1,… 取 值 0,1,…. 于 是 P(A) = 于 pne-">， 而 母 范 数 是 
P(s) = 于 pns". 因此 , p( 和 ) = P(e~*), 拉 普 拉 斯 变换 与 母 函 数 的 不 同 之 处 仅 在 于 
变量 昔 换 s = e-*. 这 说 明 为 什么 拉 普 拉 斯 变换 的 性 质 与 母 函 数 的 性 质 那么 相似 . 
例 (b) “密度 为 fa(z) = (z*-!1/T(a))e-? 的 工分 布 的 变换 是 
wa(A) = ry 二 er-(A+bDzzoe-ldz = Gi a>0. (1.3) 
下 一 定理 说 明 , 分 布 可 由 它 的 变换 来 确定 . 车 没有 这 一 点 , 拉 普 拉 斯 变换 的 用 
途 将 是 很 有 限 的 . 
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定理 1 (唯一 性 . ) 不 同 的 概率 分 布 有 不 同 的 拉 普 拉 斯 变换 . 

第 一 种 证 明 ”在 8.6 节 (6.4) 中 我 们 有 这 样 一 个 明显 的 反 演 公式 , 使 得 在 已 知 下 的 
变换 时 我 们 可 以 用 此 公式 来 计算 F. 我 们 将 在 第 4 节 中 重新 推导 这 个 公式 
第 二 种 证 明 设 y=e-*. 当 z 从 0 变 到 oo 时 , 变量 y 从 1 变 到 0. 我 们 现在 通过 
在 连续 点 上 令 G(y) = 1 一 下 (z) 来 定义 一 个 集中 于 0,1 上 的 概率 分 布 G. 于 是 


OO 1 
oW= 人 Fltaj= { wotaw, (4) 


此 式 由 下 列 事实 来 看 是 显然 的 : 黎 最 和 于 exXz*[F(zk+l) 一 (Zk)] 与 yk = 二 e-** 时 
的 黎 曼 和 蕊 WR[G(yk) 一 G(yk+1)] 一 致 . 由 7.3 节 我 们 知道 分 布 G 由 它 的 矩 唯一 确 
定 , 这 些 矩 由 p(k) 给 出 . 于 是 p(1), yp(2),… 确定 了 G, 从 而 确定 了 下. 这 个 结果 比 
本 定理 的 断言 更 强 .9 > 

下 列 基本 结果 是 定理 1 的 简单 推论 . 
定理 2 (连续 性 定理 ) 对 n = 1,2,…, 设 Fn 是 变换 为 pn 的 概率 分 布 . 

如 果 Fn 一 下 ， 其 中 已 是 变换 为 p 的 可 能 为 亏损 的 分 布 ， 那 么 对 于 入 > 
own(D -PN 

反之 ,如 果 对 每 个 入 > 0， 序列 {pn( 和 )} 收敛 于 一 个 极限 p(》)， 那 么 是 一 个 
可 能 为 亏损 的 分 布 的 变换 ， 并且 Fn 一 下. 

极限 忆 不 是 才 损 的 ， 当 且 仅 当 和 一 0 时, p(X) 一 1 
证 第 1 部 分 已 包含 在 8.1 节 的 基本 收敛 定理 中 了 . 对 于 第 2 部 分 , 我 们 利用 8.6 
节 的 选择 定理 1. 设 {F;,} 是 一 个 收敛 于 一 可 能 为 亏损 的 分 布 F 的 子 序列 . 根据 定 
理 的 第 1 部 分 ,这些 变换 收敛 于 F 的 拉 普 拉 斯 变换 . 由 此 推出 , FF 是 拉 普 拉 斯 变 
换 为 p 的 唯一 分 布 , 从 而 所 有 收敛 的 子 序 列 收敛 于 同一 极限 F. 这 蕴含 及 收敛 于 
到 . 由 (1.1), 定理 的 最 后 断言 是 显然 的 . > 

为 了 叙述 清楚 ,我 们 尽 可 能 使 字母 FF 只 表示 概率 分 布 , 但 是 代替 (1.1), 我 们 
考虑 形 如 区 

w( = [ er-xzUfdz} (1.5) 
0 


的 更 一 般 的 积分 , 其 中 U 是 对 有 限 区 间 了 赋予 有 限 质 量 V{7}, 但 可 以 对 正 半 轴 赋 
予 无 限 质量 的 测度 . 照例 ,我 们 可 以 利用 由 U(z) = U{ 0z } 定义 的 非 正常 分 布 函 
数 来 方便 地 描述 这 个 测度 . 在 是 某 一 函数 v > 0 的 积分 这 一 重要 特殊 情形 下 , 积 
@ 更 一 般 地 说 ， 一 个 完全 单调 函数 由 它 在 使 并 an: 发 散 的 点 列 {an} 上 的 值 唯一 确定 . 然而 ,如果 

于 on 收 全, 那么 存在 两 个 不 同 的 完全 单调 函数 ,它们 在 所 有 的 点 an 上 都 重合 . 关于 这 个 著名 定 


理 的 初等 证 明 , 见 W. Feller, On Miintz’ theorem and completely monotone functions, Amer. 
Math. Monthly, vol. 75(1968)pp. 342-350. 
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分 (1.5) 化 为 
wO) = / er-xzuzjdz. (1.6) 
有 . 


例 (c) 如 果 u(z)=z*, 其 中 a> -1, 那么 对 于 所 有 的 和 >0, w(A) =T(a+1)/X°+1. 
例 (d) 如 果 wu(z) = ez*, 那么 对 于 和 >a>0,w(A) = 1/( 和 一 a), 但 是 积分 (1.6) 对 
入 < a 发散 . 

例 (e) ”如 果 u(z) = e ,那么 积分 (1.6) 处 处 发 散 . 

例 (9) ”由 (1.1) 通过 微分 得 到 


-pp(N)= 人/ 条 erXzzFfdz}， (1.7) 


这 是 一 个 形 如 (1.5) 的 积分 ,其 中 U{dz} = zF{dz}. 这 个 例子 说 明 形 如 (1.5) 的 积 
分 在 与 正常 概率 分 布 有 关 的 问题 中 是 怎样 自然 地 出 现 的 . > 
我 们 将 主要 对 从 概率 分 布 通 过 简单 的 运算 导出 的 测度 U 感 兴趣 , (1.5) 的 积分 
一 般 说 来 对 所 有 的 和 > 0 都 收敛 . 但 是 排除 只 对 某 些 收敛 的 测度 , 我 们 也 得 不 到 
什么 东西 . 由 于 w(a) < oo 蕴含 对 于 所 有 的 和 > a, w(A) < oo, 从 而 使 (1.5) 中 的 积 
分 收敛 的 和 的 值 充满 区 间 55. 
定义 2 设 U 是 一 个 集中 于 05 上 的 测度 . 如 果 (1.5) 中 的 积分 对 和 > a 收 化 ， 那 么 
对 入 > aq 定义 的 函数 w 称 为 [的 拉 普 拉 斯 变换 , 


如 果 U 有 密度 4， 那么 U 的 拉 普 拉 斯 变换 (1.6) 也 称 为 u 的 普通 拉 普 拉 斯 变 
换 . 


上 一 约定 只 是 为 了 方便 才 引入 的 . 如 果 要 进行 系统 的 讨论 , 我们 应 考虑 形 如 
[/ 过 exsu(z)Ufdz} (1.8) 
o 


的 更 一 般 的 积分 , 并 称 它们 为 “v 关于 测度 U 的 拉 普 拉 斯 变换 ". 于 是 (1.6) 是 “u 关于 拉 
普 拉 斯 测度 (或 普通 长 度 ) 的 变换 *. 这 有 一 个 理论 上 的 优点 ， 即 可 以 考虑 可 改变 符号 的 函 
数 " 和 为 了 本 书 的 目的 , 最 简单 且 最 准确 的 方法 是 只 把 拉 普 拉 斯 变换 和 测度 联系 起 来 ， 
我 们 将 这 样 做 . 9 


@ 术语 还 未 统一 ,在 文献 中 术语 “F 的 拉 普 拉 斯 变换 " 既 可 指 (1.1), 也 可 指 (1.6). 我 们 把 (1.6) 称 
为 “分 布 函 教 FF 的 普通 拉 普 拉 斯 变换 ", 但 是 , 主要 讨论 这 种 变换 的 书 通 常 省 路 了 限制 词 “普通”. 
为 了 在 这 些 情形 下 不 发 生 混 清 , 我 们 称 变换 (1.1) 为 拉 普 拉 斯 一 斯 蒂 尔 切 斯 (Laplace-Stieltjes) 变 
换 . 
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如 果 U 是 一 个 使 (1.5) 中 的 积分 对 入 = a 收敛 的 测度 , 那么 对 所 有 的 和 > 0， 
w+a) = [ “eerezUfdz} = [/ erU# {qz} (1.9) 
0 0 


是 有 界 测度 U#{dz} = e-**U{dz} 的 拉 普 拉 斯 变换 , w( 和 十 a)/w(a) 是 一 个 概率 分 
布 的 拉 普 拉 斯 变换 . 每 个 关于 概率 分 布 的 变换 的 定理 可 以 用 这 种 方法 推广 到 一 类 更 
广泛 的 测度 上 去 . 由 于 新 变换 w(A + o) 的 图 形 是 由 w 的 图 形 经 过 平移 得 到 的 , 所 
以 我 们 把 这 个 极 有 用 的 方法 称 为 平移 原理 . 例如 ， 因 为 UV 唯一 地 由 U# 确定 , 且 
U# 唯一 地 由 入 > 0 的 w(A+a) 确定 , 所 以 我 们 可 以 把 定理 1 推广 如 下 . 
定理 la 一 个 测度 U 由 它 在 某 区 间 a < 入 < co 上 的 拉 普 拉 斯 变换 (1.5) 的 值 唯 
一 确定 . 
系 一 个 连续 函数 LU 由 它 在 某 区 间 a < 入 < co 上 的 普通 拉 普 拉 斯 变换 (1.6) 的 值 
唯一 确定 . 
证 ”变换 唯一 地 确定 了 v 的 积分 UV, 两 个 不 同 的 连续 @ 函数 不 可 能 有 相同 的 积分 . 
> 

[一 个 用 ww 表示 4 的 明显 公式 已 在 7.6 节 (6.6) 中 给 出 . ] 

连续 性 定理 可 类 似 地 推广 到 具有 拉 普 拉 斯 交换 的 任意 测度 Un 的 序列 上 去 . Un 
有 拉 普 拉 斯 交换 这 个 事实 蕴含 对 于 有 限 区 间 I,Un{T} < oc. 我 们 由 8.1 节 和 8.6 节 
知道 ， 为 使 这 样 的 测度 序列 收敛 于 一 个 测度 U， 当 且 仅 当 对 于 U 的 每 个 有 限 连 续 
区 间 , Un,{I} 一 U{I} < oo. 
定理 2a ( 广义 连续 性 定理 . ) 对 于 n= 二 1,2,…, 设 Un 是 具有 拉 普 拉 斯 变换 wn 
的 测度 . 如 果 对 于 入 > a wn(A) 一 w( 和 )， 那么 w 是 一 个 测度 U 的 拉 普 拉 斯 变换 ， 
并 且 Un 一 UU. 

反之 , 如果 Un 一 U 且 序列 {wn(a)} 是 有 界 的 , 那么 对 于 入 > a,wn( 和 A) = w( 和 ). 
证 (a) 假设 Un 一 U, wn(a) < 4. 如 果 t>0 是 UU 的 连续 点 , 那么 


t t 
/ et+aoztUmn{fdz} 一 六 erCAtajztrfdz}， (1.10) 
0 0 
左边 与 wn( 和 十 a) 之 差 至 多 为 
[ 及 er-(O+azUnfdz}l < he (1.11) 
0 


选取 充分 大 的 上 可 使 上 式 < e. 这 就 是 说 , wn(A+ a) 的 上 、 下 极限 之 差 小 于 任意 的 
6, 因此 对 于 每 个 和 > 0, 序列 {wn( 和 十 a)} 收敛 于 一 个 有 限 的 极限 . 


@ 同一 论证 说 明 , 一 般 说 来 , 除 一 零 测 集 外 , u 是 确定 的 - 
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(b) 假设 对 于 入 > a, wn(A) 一 w(A). 对 于 固定 的 Xo > a, 函数 wn(AX+TXo)/wn(Xo) 
是 概率 分 布 U#{dz} = (LI/wn(Xo))e->=Un{dz} 的 拉 普 拉 斯 变换 . 因此 ,根据 连续 
性 定理 , U# 收敛 于 一 个 可 能 为 亏损 的 分 布 U0#，, 这 蕴含 nm 收敛 于 一 个 这 样 的 测 
度 U, 使 得 U{dz} = (Xo)e*U#{dz}. p 
下 列 例子 说 明了 {wn(o)} 有 界 这 个 条 件 的 必要 性 . 
例 (g) 设 U 对 点 nn 赋 邓 质量 er ,对 于 的 余 集 赋 于 重量 0. 因为 Un{0,7} = 0， 
所 以 我 们 有 Us 一 0, 但 是 对 于 所 有 的 和 > 0,wn(A) = en 一 oo. > 


我 们 有 时 谈 到 具有 两 个 尾部 的 分 布 下 的 双 侧 变 换 ， 即 
yp(N) = 六 并 e Ff{dz}, (1.12) 
但 是 这 个 函数 对 任 一 和 关 0 都 不 一 定 存在 . 如 果 它 存在 ,那么 常 称 p( 一 和 ) 为 矩 母 函数 , 但 
实际 上 它 是 序列 {jn/ni} 的 母 函 数 ,其 中 jm 是 n 阶 矩 . 
13.2 基本 性 质 


本 节 我 们 列举 拉 普 拉 斯 变换 的 最 常用 的 性 质 , 与 母 函数 的 类 似 性 是 明显 的 . 
(i) 卷 积 , 设 已 和 G 是 概率 分 布 , U 是 它们 的 卷 积 , 即 


v= [ ce -wrtav). (2) 
相应 的 拉 普 拉 斯 变换 服从 来 积 法 则 
w= PV. (2.2) 


这 等 价 于 下 面 的 断言 : 对 于 独立 随机 变量 , E(eMX+Y7)) = E(e-*X)BE(e-*Y), 这 是 期 
望 的 乘积 法 则 的 一 个 特殊 情形 .? 
如 果 王 和 G 有 密度 f 和 g, 那么 U 的 密度 为 


uo) = [ste wrey, (3) 


乘法 法 则 (2.2) 可 应 用 于 f,g 和 的 “普通 ” 拉 普 拉 斯 变换 (1.6). 
我 们 现在 来 说 明 ， 乘法 法 则 可 以 推广 如 下 . 设 已 和 G 是 具有 对 入 > 0 收敛 的 
拉 普 拉 斯 变换 p 和 的 任意 测度 . 那么 卷 积 U 的 拉 普 拉 斯 变换 山 由 (2.2) 给 出 . 这 
特别 地 蕴含 乘法 法 则 可 应 用 于 任意 两 个 函数 了 和 9 及 其 卷 积 (2.3) 的 “普通 ” 变换 
@ 其 地 是 错误 的 ， 两 个 相依 变量 的 和 的 分 布 可 能 由 卷 积 公式 给 出 [ 见 2.4 节 (e) 和 3.9 节 的 习题 1. ] 
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为 了 证 明 这 个 断言 , 我 们 引入 一 个 有 限 测度 FF , 它 是 用 如 下 方式 截断 下 得 到 
的 : 对 于 z < n, 我 们 令 (7z) = F(z), 但 是 对 zx > nn 我 们 令 Fn(z) = F(n). 可 以 
通过 截断 G 来 类 似 地 定义 G。. 对 于 z < n, 卷 积 U, = FF * G， 与 U 相同 , 从 而 
不 仅 有 Fn 一 正和 Gn 一 G, 而 且 有 Un 一 U. 对 于 相应 的 拉 普 拉 斯 变换 , 我 们 有 
wn = pnUn, 令 n 一 oo 就 得 到 断言 w = pv 
例 (a) 分 布 . 13.1 节 例 (b) 中 的 卷 积 法 则 fo * fg = fatp 反映 在 明显 的 关系 式 
pap8 二 Pat+8 中 . 
例 (b) 。 紧 . 对 于 ua(z) = z*-1/T(a), 有 一 个 相应 的 普通 拉 普 拉 斯 变换 wa(A) = 
入 “, 由 此 推出 ve 和 wp 的 卷 积 (2.3) 由 ua+e 给 出 . 因为 pa(A) = wa( 和 +1), 所 以 
上 例 可 由 此 结果 利用 平移 原理 推出 . 
例 (c) ”如 果 a > 0， 那 么 em"Auw( 和 ) 是 分 布 函数 为 U(z 一 a) 的 测度 的 拉 普 拉 斯 变换 . 
这 从 定义 来 看 是 显然 的 , 但 也 可 以 看 作 是 卷 积 定理 的 特殊 情形 , 因为 e-"* 是 集中 
于 点 a 上 的 分 布 的 变换 . 

(二 ) 导数 与 矩 . 如 果 已 是 一 个 概率 分 布 , p 是 它 的 拉 普 拉 斯 变换 (1.1), 那么 p 
具有 各 阶 导数 , 它们 由 下 式 给 出 ; 


CDremOQ= feet) (2.4) 
0 


(与 平常 一 样 , 和 > 0). 我 们 可 以 在 积分 号 下 取 微分 , 因为 新 的 被 积 函数 是 有 界 连续 
函数 . 

由 此 特别 地 推出 , 玉 有 有 限 的 mn 阶 短 ， 当 且 仅 当 存 在 有 限 的 极限 pl")(0). 因此 ， 
对 于 一 个 随机 变 二 ,利用 发 散 情 形 下 的 明显 的 约定 , 我 们 可 以 记 


E(X) = -wp(0), E(X?) = wo"(0). (2.5) 


微分 法 则 (2.4) 对 任意 的 测度 下 仍然 成 立 . 
(iii) 分 部 积分 . 在 (1.1) 中 利用 分 部 积分 法 可 得 


/ ”ezFlzodz= PN, A>o. (2.6) 
有 
对 于 概率 分 布 ， 有 时 最 好 利用 尾部 来 改写 (2.6): 
fea- re = 二 (27) 
有 x 


它 对 应 于 第 1 卷 11.1 节 (1.6) 母 函 数 公式 . 
(iv) 尺度 的 改变 . 由 (1.2) 可 得 ,对 于 每 个 固定 的 > 0 有 E(e-*) = p(X)， 
从 而 p(aX) 是 分 布 Pfdz/a}[ 分 布 函数 为 F(z/a]] 的 变换 . 这 个 关系 式 被 经 常 利用 . 
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例 (d) 大 数 定律 . 设 X1,X2,… 是 有 相同 的 拉 普 拉 斯 变换 的 独立 随机 变量 . 假设 
(Xj) = jr. 和 Xi 十 … 十 Xn 的 拉 普 拉 斯 变换 为 p". 因此 , 平均 值 [X1 十 … 二 Xn]/n 
的 变换 为 pg"( 和 /mn). 在 原点 附近 2(A) = 1 一 pA+o(A) [ 见 (2.5)], 从 而 当 n 一 co 时 ， 


limyp" 人 =lim G 2) em (2.8) 


但 是 e- 是 集中 于 yj 上 的 分 布 的 拉 普 拉 斯 变换 , 因此 [Xi +… 十 Xn]/n 的 分 布 趋 
于 这 个 极限 . 这 是 辛 钦 弱 大 数 定律 ， 它 不 要 求 方差 存在 . 确实 ,其 证 明 只 能 直接 应 
用 于 正 变量 , 但 是 它 说 明了 拉 普 拉 斯 变换 方法 的 优美 . p 


13.3 例 


例 (a) ”均匀 分 布设 下 表示 集中 于 0,1 上 的 均匀 分 布 ， 它 的 拉 普 拉 斯 变换 为 
92(A) = (1 一 e*)/ 和 \. 利用 二 项 展开 式 可 见 , n 重 卷 积 Fny 的 变换 为 


ED A (8.1) 
(9 


因为 ”是 对 应 于 U(z) = z"/nl 的 变换 , 所 以 13.2 节 例 (c) 说 明 eA~" 对 应 于 
(z 一 k)3/nl, 其 中 z+ 表示 这 样 一 个 函数 , 当 z < 0 时 它 等 于 0, 当 z > 0 时 它 等 于 
TL, 因此 ， 


1 n 这 
Fnx(a) = A (ne) (一 有 (32) 


我 们 在 1.9 节 (9.5) 中 利用 直接 计算 导出 过 这 个 公式 ,在 第 1 卷 第 11 章 的 习题 20 
中 也 用 取 极 限 的 方法 导出 过 这 个 公式 . 
例 (b) 指数 为 5 的 稳定 分 布 . 分 布 函 数 


G(z) =2l1 -R/Vz)], z>0 (3.3) 
(其 中 名 是 标准 正 态 分 布 ) 有 拉 普 拉 斯 变换 
7N) = eV (3.4) 


这 可 用 初等 的 计算 来 验证 , 但 是 这 些 计 算是 相当 元 长 的 , 我 们 最 好 用 第 1 卷 3.7 节 
中 的 极限 定理 3 来 推导 (3.4). 在 这 个 定理 中 , 我们 首次 遇 到 了 分 布 G. 考虑 简单 
的 对 称 随 机 游 动 ( 掷 硬币 )， 用 表示 首次 返回 原点 的 时 刻 . 所 引用 的 极限 定理 指 
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出 , G 是 正规 和 (Ti 十 … 十 Ta)/m? 的 极限 分 布 , 其 中 五 , 字 ,… 是 与 了 同 分 布 的 独 
立 随机 变量 . 根据 第 1 卷 11.3 节 (3.14), 7 了 的 母 函 数 为 f(s) = 1 一 Vi 一 及 ,因此 


7(A) = limll — V1 一 e-2xX]” = lim E 一 天 | =e-v2. (3.5) 


我 们 曾经 多 次 说 过 G 是 一 个 稳定 分 布 , 但 是 直接 通过 计算 验证 是 麻烦 的 . 现在 
显然 有 y"( 和 ) = Y(n2A)， 这 和 G"*(z) = G(n-?z) 相同 ,这样 我 们 毫 不 费力 地 证 明 
了 稳定 性 . 

例 (c) 震级 数 与 混合 . 设 下 是 一 个 拉 普 拉 斯 变换 为 P(A) 的 概率 分 布 . 我 们 一 再 
遇 到 形 如 a 
G= pF** (3.6) 
大 =0 
的 分 布 , 其 中 {pk} 是 一 个 概率 分 布 . 如 果 P(s) = 于 pks* 表示 {pk} 的 母 函 数 ， 那 
么 G 的 拉 普 拉 斯 变换 显然 为 


7N) = Dprp*(N) = P(p(N)). (3.7) 
k=0 


这 个 原理 可 以 推广 到 具有 正 系数 的 任意 乱 级 数 上 去 . 我 们 转向 特殊 的 应 用 . 
例 (d) 贝 宏 尔 西数 密度 . 在 2.7 节 例 (c) 中 我 们 曾 看 到 , 对 于 > = 1,2.…, 密度 
wlz) = e 人) (3.8) 


对 应 于 一 个 形 如 (3.6) 的 分 布 ， 其 中 F 是 一 个 满足 P(A) = 1/(A+ 1) 的 指数 分 
布 , {px} 是 普通 对 称 随机 游 动 中 首次 通过 点 7 > 0 的 时 刻 的 分 布 . 这 个 分 布 的 母 函 


数 是 人 

P(s) = (全 全 (3.9) 
见 第 1 卷 11.3 节 式 (3.6)]. 代入 s = (1 + A)-!,， 我 们 得 到 概率 密度 (3.8) 的 普通 拉 
普 拉 斯 变换 为 

B+1- VO+ I 1. (3.10) 


我 们 只 对 " = 1,2,… 证 明了 w 是 一 个 概率 密度 , 且 (3.10) 是 它 的 拉 普 拉 斯 变 
换 . 但 是 , 这 个 结论 对 所 有 的 + > 0 都 是 正确 的 9. 它 具 有 概率 意义 , 因为 它 蕴 含 卷 
积 公式 w + vs = w+s， 从 而 蕴含 w 的 无 穷 可 分 性 . ( 见 13.7 节 . ) 


@ 这 个 结果 应 归功 于 韦伯 (H. Weber). 他 给 出 的 极其 困难 的 分 析 证 明 现在 已 被 J. Soc. Industr. Appl. 
Math., vol. 14(1966)pp. 864-875 中 的 初等 证 明 所 代替 . 
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例 (e) 另 一 个 贝 塞 尔 密度 . 在 (3.6) 中 取 下 为 满足 2(A) = 1/( 和 +1) 的 指数 分 布 ， 
取 {pk} 为 满足 P(s) = e+ 的 泊 松 分 布 . 容易 明确 地 计算 G, 但 是 这 个 任务 幸好 
已 在 2.7 节 例 (a) 中 完成 了 . 我 们 在 那里 曾 看 出 , 2.7 节 (7.2) 中 所 定义 的 密度 


up(z) = e—t-* Vz/E)?1,(2VIz) (3.11) 


是 我 们 的 分 布 G 与 密度 ,pt+1 的 卷 积 . 由 此 推出 , wp 的 普通 拉 普 拉 斯 变换 是 我 
们 的 7 与 fpti 的 变换 (和 十 1)?+! 的 乘积 . 因此 ,概率 密度 (3.11) 的 拉 普 拉 斯 变换 
为 


区 Te ot, (3.12) 


对 于 t = 1， 利 用 平移 法 则 (1.9) 可 以 看 出 ，V5z1p(2V5) 的 普通 拉 普 拉 斯 变换 为 
和 -plel/. 
例 (f) ”指数 密度 的 混合 . 设 密度 具有 形式 
f(z) = Dprare ™”, pe>0, Dpr=1, (3.13) 
k=1 k=1 


其 中 为 确定 起 见 , 假设 0 < al < … < an. 对 应 的 拉 普 拉 斯 变换 为 


-Vp -0N 
vp(N) = rt = pO) (3.14) 
其 中 已 是 一 个 根 为 -a1,…, 一 an 的 n 次 多 项 式 , Q 是 一 个 n 一 1 次 多 项 式 . 反之 ， 
对 于 任意 一 个 n 一 1 次 多 项 式 Q， 比 Q(A)/P(A) 有 形 如 (3.14) 的 部 分 分 式 展开 式 ， 
其 中 

~ Q(-ar) 
arpr = PC-a,) 
[ 见 第 1 卷 11.4 节 (4.5)]. 为 使 (3.14) 对 应 于 一 个 混合 (3.13), 当 且 仅 当 p. >0 且 
Q(0)/P(0) =1. 由 书 的 图 形 显然 可 见 , 已 (-ar) 和 P'(-ar+1) 一 定 具 有 相反 的 符号 . 
因此 , Q(-ar) 和 @(-or+i) 也 一 定 有 相反 符号 . 换 句 话说 , Q 必定 在 -ar 和 一 ar+1 
之 间 有 一 个 根 -br. 但 是 , 因为 Q 不 可 能 有 n 一 1 个 以 上 的 根 -or， 所 以 这 些 根 一 
定 满足 


(3.15) 


0O<al<bi<az<b < <bnl<an. (3.16) 


这 就 保证 了 所 有 的 pr 是 同 号 的 , 我 们 得 到 了 下 列 结论 : 设 P 和 @ 分 别 是 n 次 和 
n 一 1 次 多 项 式 , 并 且 Q(0)/P(0) = 1. 为 使 @(A)MP(A) 是 指数 密度 的 某 一 混合 (3.13) 
的 拉 普 拉 斯 变换 ， 当 且 仅 当 忆 的 根 -ar 和 @ 的 根 -b 是 互 不 相同 的 , 并且 (以 适 
当 的 编号 ) 满足 (3.16). [a 
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13.4 ”完全 单调 函数 , 反 演 公式 


正如 我 们 在 7.2 节 中 所 看 到 的 那样 ,为 使 0,I 上 的 函数 了 是 一 个 正 序列 {f,} 
的 母 函 数 ， 当 且 仅 当 f 是 绝对 单调 的 , 即 只 要 f 为 无 穷 可 微 的 且 其 各 阶 导数 均 为 
正 的 . 对 拉 普 拉 斯 变换 也 有 类 似 的 定理 , 所 不 同 的 只 是 现在 的 导数 的 符号 是 交错 的 . 
定义 1 机 co 上 的 一 个 函数 p 是 完全 单调 的 ， 如 果 它 的 各 阶 导 数 pl") 均 存 在 ,并 
且 

(-D"epeD(A) > 0， 入 > 0， (4.1) 

当 入 一 0 时 wp)(A) 趋 近 于 有 限 或 无 限 的 极限 , 我 们 把 它 表示 为 pf)(0). 典型 
的 例子 是 1/ 入 和 1/(L + 入) 

下 述 优美 的 定理 (为 S. 伯 因 斯 坦 在 1928 年 得 到 的 ) 是 许多 研究 的 出 发 点 , 其 
证 明 已 经 逐步 地 被 简化 了 . 我 们 能 够 给 出 一 个 极其 简单 的 证 明 , 因为 作为 大 数 定律 
的 推论 而 得 到 的 7.2 节 的 定理 2 中 关于 母 函 数 的 特征 的 叙述 已 为 它 打下 了 基础 . 
定理 1 为 使 0,00 上 的 函数 9p 是 一 个 概率 分 布 已 的 拉 普 拉 斯 变换 ， 当 且 仅 当 它 
是 完全 单调 的 , 并 且 (0) = 1. 

我 们 将 证 明 这 个 定理 的 一 种 变形 , 这 种 变形 以 更 一 般 的 形式 出 现 , 但 是 它 实际 
上 可 借助 于 (1.9) 中 所 述 的 平移 原理 由 原来 的 形式 (定理 1) 导出 . 
定理 la 0,00 上 的 函数 p 是 完全 单调 的 ， 当 且 仅 当 它 具有 如 下 形式 : 


e(A) = / ep{dz}, (4.2) 


其 中 局 不 一 定 是 0,00 上 的 有 限 测度 . 
(按照 最 初 的 约定 ， 积 分 区 间 是 闭 的 ; F 在 原点 的 可 能 的 原子 使 得 p(co) > 0.) 
证 条 件 的 必要 性 可 像 在 (2.4) 中 那样 用 形式 微分 推出 . 假设 p 是 完全 单调 的 , 对 
于 固定 的 a>0 和 0<s<1, 把 yp(a 一 as) 看 成 是 s 的 函数 . 它 的 各 阶 导数 显然 是 
正 的 , 根据 7.2 节 的 定理 2, 泰勒 展开 式 
pla—as)= 入 Coo) (4.3) 


1 
n=0 


对 0< s<1 成 立 . 于 是 


wa) = pl oe Ne) = COG ony (4 

n=0 
是 一 个 对 点 n/a 赋 对 质量 (-a)"p0m(a)/nl( 基 中 一 1,2,…) 的 算术 测度 的 拉 普 拉 
斯 变换 . 于 是 当 a。 oo 时 pa(A) 一 2(X). 困 此 , 根据 广义 连续 性 定理 , 存在 这 样 的 
一 个 测度 ,使 得 F 一 ,并且 p 是 它 的 拉 普 拉 斯 变换 . > 
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我 们 不 但 证 明了 定理 1a, 而 且 关系 式 Fa 一 下 可 以 改 述 成 重要 的 
定理 2 ( 反 演 公式 ) 如 果 (4.2) 对 于 入 > 0 成 立 ， 那 么 在 所 有 的 连续 点 上 @， 


FP@)= lm, He") (5) 
ngar 


这 个 公式 具有 重大 的 理论 意义 , 并 且 利用 它 可 以 得 出 许多 结论 . 下 述 有 界 性 准 
则 可 以 作为 一 个 对 半 群 理论 特别 有 用 的 例子 . (见习 题 13. ) 
桶 为 使 9 具有 形式 


oO = 人 (ad (4.6) 
其 中 0 和 < 了 < C, 当 且 仅 当 对 于 所 有 的 a > 0， 


一 ajmno(m) 
0< CP) 0 
n! 


- (4.7) 


证 在 (4.6) 的 两 边 取 微分 , 我 们 得 到 (4.7)[ 见 (2.4)]. 反之 , (4.7) 蕴含 p 是 完全 
单调 的 ， 从 而 是 一 个 测度 下 的 变换 .把 (4.7) 代入 (4.5), 我 们 可 得 ， 对 于 任 一 对 


T1 < 7Z2， 


F(z2)— F(z1) < C(x2 一 Z1). 


这 就 是 说 , F 有 有 界 差 商 , 因此 FF 是 一 个 函数 f < C 的 积分 ( 见 5.3 节 ). p 
定理 1 导致 了 一 个 检验 一 给 定 的 函数 是 不 是 一 个 概率 分 布 的 拉 普 拉 斯 变换 的 
简单 方法 . 标准 的 技巧 可 用 下 列 准则 的 证 明 来 说 明 . 
准则 1 ”如果 % 和沙 是 完全 单调 的 ,那么 它们 的 磁 积 p 也 是 完全 单调 的 ， 
证 ”我们 用 归纳 法 来 证 明 , py 的 导数 的 符号 是 交错 的 . 假设 对 于 每 对 完全 单调 函 
数 we 的 前 个 导数 的 符号 是 交错 的 . 由 于 -w 和 一 是 完全 单调 的 ， 所 以 
归纳 法 假设 可 应 用 于 乘积 -py 和 一 pW 从 一 (pW) = 一 p'V 一 py' 我 们 可 得 , py 
的 前 n+1 个 导数 的 符号 是 交错 的 . 因为 这 个 假设 对 n = 1 显然 是 正确 的 ， 从 而 这 
个 准则 得 证 . p- 
利用 同样 的 证 明 可 以 得 到 下 列 有 用 的 
准则 2 如果 是 完全 单调 的 , 少 是 一 个 有 一 完全 单调 导数 的 正 函 数 ， 那 么 P(W) 
是 完全 单调 的 . (特别 , e-* 是 完全 单调 的 . ) 
典型 的 应 用 将 在 13.6 节 和 下 例 中 给 出 ， 此 例 经 常 以 不 必要 的 复杂 形式 出 现在 
文献 中 . 


@ 反 演 公式 (4.5) 在 7.6 节 (6.4) 中 作为 大 数 定律 的 直接 推论 曾 被 导出 过 在 7.6 节 (6.6) 中 对 形 如 
(4.6) 的 积分 (其 中 了 为 连续 的 ,但 不 一 定 是 正 的 ) 我 们 有 类 似 的 反 演 公式 
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例 (a) 一 个 出 现在 分 支 过 程 中 的 方程 . 设 p 是 一 个 期 望 为 0 < jy < oo 的 概率 分 
布下 的 拉 普 拉 斯 变换 , 并 设 c > 0. 我 们 来 证 明 方 程 


BN) = w+e— BN)) (4.8) 


有 唯一 的 一 个 根 B(A) < 1, 并 且 B 是 一 个 分 布 BB 的 拉 普 拉 斯 变换 . 是 正常 分 布 ， 
当 且 仅 当 jvc < 1, 否则 BB 是 亏损 分 布 . 

(关于 应 用 和 参考 文献 见 14.4 节 . ) 
证 ”对 于 固定 的 和 >0 和 0<s<1, 考虑 方程 


yp(A+ec—cs)—s=0. (4.9) 


左边 是 一 个 凸 函数 , 它 在 s = 1 上 取 负 值 , 在 s = 0 上 取 正 值 . 由 此 推出 存在 唯一 
的 一 个 根 . 

为 了 证 明 根 B(A) 是 一 个 拉 普 拉 斯 变换 , 令 Bo = 0, 并 递 推 地 令 Bn+1 = 9( 和 十 
c 一 cBn). 于 是 bo < Bi < 1, 因为 p 是 递减 的 , 所 以 这 蕴含 BL < Ba。 < 1, 根据 归 
纳 法 知 bn < Bn+1 < 1. 有 界 单调 序列 {6B} 的 极限 满足 (4.8), 从 而 有 6 = lim B. 
有 i(A) = p( 和 +c) 是 完全 单调 的 , 利用 准则 2 可 以 递 推 地 说 明 Bz, Bs,… 是 完全 单调 
的 . 根据 连续 性 定理 ,极限 6 也 是 完全 单调 的 ， 从 而 6 是 一 个 测度 B 的 拉 普 拉 斯 
变换 . 因为 对 于 所 有 的 X, B(A) < 1, 所 以 B 的 总 质量 8(0) < 1. 剩 下 的 工作 是 确定 
在 什么 条 件 下 8(0) = 1. 

根据 构造 , s = 8(0) 是 方程 


yp(c—cs)—-s=0 (4.10) 
的 最 小 根 . 看 作 s 的 函数 ,左边 是 凸 的 ; 当 s = 0 时 它 是 正 的 ， 当 s = 1 时 它 等 
于 0. 因此 ， 为 使 方程 存在 另外 一 个 根 s < 1， 当 且 仅 当 在 s = 1 上 即 当 且 仅 当 
一 cp(0) > 1, 导数 是 正 的 . 在 其 他 情况 下 , 8(0) = 1 8 是 一 个 正常 概率 分 布 B 的 拉 
普 拉 斯 变换 . 因此 , 为 使 B 是 正常 分 布 , 当 且 仅 当 -cp'(0) = cu < 1. p 

13.5 陶 伯 定理 

设 U 是 一 个 集中 于 56 上 的 测度 , 而 且 它 的 拉 普 拉 斯 变换 
sk i 一 Ar， 

w() = erxzUfdz} (5.1) 


对 任意 的 入 > 0 都 存在 . 利用 由 U(z) = U{0,z },z > 0 定义 的 非 正常 分 布 函数 来 
描述 UU 将 是 很 方便 的 . 我 们 将 看 到 , 在 相当 一 般 的 条 件 下 , w 在 原点 附近 的 性 质 唯 
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一 地 确定 了 U(z) 在 z 一 co 时 的 渐 近 性 质 , 反之 亦 然 . 在 历史 上 任何 用 w 描述 U 
的 渐 近 关系 式 都 被 称 为 陶 伯 定 理 , 而 用 U 描述 的 性 质 的 关系 式 通常 被 称 为 阿 贝 
尔 定理 . 我 们 将 不 区 分 这 两 类 定理 , 因为 我 们 的 关系 式 将 是 对 称 的 . 

为 了 避免 不 雅 观 的 包含 倒数 的 公式 , 我 们 引入 两 个 以 


tr=1 (5.2) 


相 联系 的 正 变量 上 和 r. 于 是 当 上 一 co 时 7 一 0. 

为 了 理解 陶 伯 定 理 的 背景 ， 要 注意 ， 对 于 固定 的 t, 在 (5.1) 中 引入 变量 替换 
Z= 翅 可 知 , w(rA) 是 对 应 于 非 正 常 分 布 函数 U(ty) 的 拉 普 拉 斯 变换 . 因为 w 是 递 
减 的 , 所 以 可 以 找到 这 样 一 个 序列 71,72,… 一 0, 使 得 当 7 跑 过 这 序列 时 有 

w(TA) 
w(7) 


并 且 Y(A) 至 少 对 于 入 > 1 是 有 限 的 . 根据 广义 连续 性 定理 , 极限 7 是 一 个 测度 G 
的 拉 普 拉 斯 变换 , 并 且 当 t 跑 过 倒数 t = 1/7 时 , 在 G 的 所 有 连续 点 上 有 
U(tz) 
w(7) 


对 z=1 可 以 看 出 U(t) 在 上 一 oo 时 的 渐 近 性 质 和 w(t"!) 的 性 质 有 和 密切 关系 . 

在 原则 上 我 们 可 以 把 这 个 事实 叙述 成 一 个 包罗 万 象 的 陶 伯 定理 ,但 是 这 样 的 
一 个 定理 在 实际 中 没有 什么 用 处 ， 为 了 得 到 适当 的 简化 ， 我 们 只 考虑 使 (5.3) 对 
任 一 种 逼近 r 一 0 都 成 立 的 情形 ， 即 w 在 0 点 正则 变化 的 情形 . 8.8 节 的 基本 引 
理 91 指出 , 极限 Y 必然 具有 Y(A) = X-2 的 形式 ， 其 中 p > 0， 对 应 的 测度 为 
G(z) = ze/T(o+1D，(5.4) 蕴含 UV 是 正则 变化 的 , 且 w 和 7 的 指数 的 绝对 值 相同 . 
我 们 把 这 个 重要 结果 和 它 的 道 叙述 成 
定理 1 设 U 是 一 个 测度 , 且 使 得 其 拉 普 拉 斯 变换 对 入 > 0 都 存在 . 那么 关系 式 


一 Y(A)， (5.3) 


— G(z). (5.4) 


0 2 70 (5.5) 
央 Ul(tz) 

D0 72, t— 00 (5.6) 
是 等 价 的 且 都 强 含 

ur) ~ UT(p+ 1). (5.7) 


@ 这 个 引 理 只 被 用 来 说 明 关系 式 (5.5) 和 (5.6) 的 不 自然 的 形式 的 合理 性 . 本 节 没 有 用 到 正则 变化 
理论 [除了 (5.18) 蕴含 (5.16) 这 个 次 要 结果 以 外 ]. 
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证 (a) 假设 (5.5) 成 立 . 左边 是 对 应 于 U(tz)/w(7) 的 拉 普 拉 斯 变换 ,根据 广义 连 
续 性 定理 ,这 北 信 本 
Ul(tz, ITP 
on) FTT G3 
对 = 二 1, 我 们 得 到 (5.7), 把 这 个 关系 式 代入 (5.8), 我 们 得 到 (5.6). 
(b) 假设 (5.6) 成 立 . 取 拉 普 拉 斯 变换 我 们 得 到 
or TO+D 


U(t) WA (5.9) 


只 要 广义 连续 性 定理 可 以 应 用 , 即 只 要 左边 对 某 个 和 是 有 界 的 . 正如 在 (a) 中 那样 
可 得 (5.9) 缠 含 (5.7) 和 (5.5). 因此 , 为 了 证 明 此 定理 ,只 需 验证 w(7)/U(t) 是 有 界 
的 就 行 了 . 

用 点 所 2t 4 … 划分 积分 区 域 , 显然 


w(r) < bp3 e-2 UU(2"t). (5.10) 
0 


由 (5.7) 可 知 ,存在 这 样 的 to, 使 得 当 t > to 时 , U(2t) < 22+1U(), 重复 利用 这 个 
不 等 式 可 得 


记 < Ds (5.11) 
因此 左边 在 上 一 co 时 确实 是 有 界 的 . > 
例 (a) 为 使 当 z 一 oo 时 U(rz)~Iln?z, 当 上 且 仅 当 和 一 0 时 w(A) ~ in2 和 . 类 似 地 ， 
为 使 U(z) ~ V3, 当 且 仅 当 oN ~ 了 VE7X 

例 (b) 设 下 是 一 个 拉 普 拉 斯 变换 为 p 的 概率 分 布 . 测度 U{dz} = zF{dz} 的 拉 
普 拉 斯 变换 为 -多 . 因此 , 如果 当 入 一 oo 时, -9'(A) ~ pA-?, 那么 


v0= | vray ~ To， 二 oo 


反之 亦 然 . 这 就 推广 了 微分 法 则 (2.4), 此 法 则 已 包含 在 p= 0 时 的 (5.7) 中 J 了. > 
有 时 知道 当 p 一 ce 时 本 定理 在 怎样 的 范围 内 仍然 成 立 是 很 有 用 的 . 我 们 以 下 

列 的 系 的 形式 来 叙述 这 个 结果 . 

系 ”如 果 对 于 某 个 a > 1， 当 t 一 co 时 ， 


一 oo， (5.12) 
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那么 
2 一 0. (5.13) 
证 (5.12) 中 的 第 1 个 关系 式 蕴含 : 对 于 入 > a, w(rA)/w(r) 一 0. 根据 广义 连续 
性 定理 , 对 于 所 有 的 > > 0, U(tz)/w(7) 一 0. 由 (5.12) 中 的 第 2 个 关系 式 可 得 到 
(5.13), 因为 
ur) > / es/tU {dz} > e-oU(ta). > 
0 


在 应 用 中 用 缓慢 变化 来 叙述 定理 1 将 更 方便 . 我 们 知道 , 一 个 定义 于 co 上 
的 正 函 数 工 在 co 处 是 缓慢 变化 的 ,如果 对 于 每 个 固定 的 z， 
工 (tz) 
L(t) 
工 在 0 点 是 缓慢 变化 的 , 如果 当 t 一 0 时 上 面 的 关系 式 成 立 , 即 如 果 L(1/z) 在 oo 
处 是 缓慢 变化 的 . 显然 , 为 使 UV 满足 (5.6), 当 且 仅 当 U(z)/z? 在 oo 处 是 缓慢 变化 
的 , 类 似 地 , 为 使 (5.5) 成 立 , 当 上 且 仅 当 Xew(A) 在 0 点 是 缓慢 变化 的 . 因此 , 定理 1 
可 以 重新 叙述 如 下 . 
定理 2 ”如 果 工 在 无 穷 远 处 是 缓慢 变化 的 ,并且 0 < p < oo， 那么 关系 式 


wT)~T™?L 人 ，T 一 0 (5.15) 


1，t 一 oo. (5.14) 


和 
1 


Wi T(p+1) 


tL(t), t—00 (5.16) 
是 等 价 的 . 


定理 2 有 辉煌 的 历史 结论 (5.16) 一 (5.15)( 从 测度 到 变换 ) 被 称 为 阿 贝尔 定理 ， 其 逆 
(5.15) 一 (5.16)( 从 变换 到 测度 ) 被 称 为 陶 伯 定理 .在 普通 的 系统 中 ,这 两 个 定理 是 完全 独立 
的 , 陶 伯 定理 部 分 很 难 证 明 . 哈代 (G. H. Hardy) 和 J. E. 李 特 尔 伍德 在 其 著名 论文 中 用 复杂 
的 计算 论述 了 w(A) ~ 和 A? 的 情形 . J. 卡拉 马 塔 在 1930 年 由 于 对 这 种 特殊 情形 给 出 了 一 个 
简化 证 明 而 引起 了 一 场 友 动 . (这 个 证 明 仍 可 在 复 变 函 数 和 拉 普 拉 斯 变换 的 教科 书 中 找到 . ) 
不 久 以 后 他 引入 正则 变化 函数 类 并 证 明了 定理 2, 但 是 他 的 证 明 对 教科 书 来 说 是 太 复杂 了 . 
施 密 特 (R. Schmidt) 大 约 于 1925 年 在 处 理 同一 问题 时 引入 了 缓慢 变化 的 概念 . 我 们 的 证 明 
简化 和 统一 了 这 个 理论 , 并 导致 一 个 不 出 名 但 很 有 用 的 系 


我 们 的 证 明 的 一 个 大 优点 是 ， 当 交换 无 穷 远 处 和 零点 的 作用 时 , 即 当 7 一 oo 
而 t 一 0 时, 它 仍然 适用 . 这 样 我 们 得 到 了 一 个 把 w 在 无 穷 远 处 的 性 质 和 U 在 原 
点 的 性 质 联系 起 来 的 对 偶 定理 . [除了 推导 (6.2) 外 , 本 书 用 不 到 这 个 定理 . ] 
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定理 3 ” 当 原点 和 无 穷 远 处 的 作用 交换 时 ,， 即 当 了 一 00,t 一 0 时， 上 述 两 个 定理 
及 其 系 仍然 成 立 . 

定理 2 是 本 节 的 主要 结果 , 但 是 为 了 完整 起 见 , 我 们 推导 2 个 有 用 的 补充 定 
理 . 首先 , 当 U 有 密度 UV' = wu 时 , 我 们 希望 得 到 关于 v 的 估计 . 我 们 不 能 一 般 性 
地 讨论 这 个 问题 . 因为 具有 良好 性 质 的 分 布 0 可 以 有 性 质 极 坏 的 密度 . 但 在 大 多 
数 应 用 中 , 密度 是 最 终 单调 的 ， 即 在 某 一 区 间 0;55 上 是 单调 的 . 对 于 这 样 的 密 
度 , 我 们 有 
定理 4@ 设 0<p< co. 如 果 U 有 最 终 单调 的 导数 4， 那么 当 入 一 0z 一 co 时 ， 


ww) ~ Sr @, 等 价 于 u(z) ~ je). (5.17) 
(关于 一 个 表面 上 较 强 的 形式 , 见习 题 16. ) 
证 ”这 个 断言 是 定理 2 和 下 述 引 理 的 直接 推论 . 
引 理 ”假设 U 有 最 终 单调 的 密度 u. 如 果 (5.16) 对 p > 0 成立, 那么 


u(z) ~ pU(z)/z，z 一 oo. (5.18) 


[反之 ， 即 使 v 不 是 单调 的 ，(5.18) 也 蕴含 (5.16). 这 已 包含 在 带 有 2 = wu 和 
p= 二 0 的 8.9 节 (9.6) 中 了 .]. 
证 对 于 0<a<b， 


U(tb) — U(ta) _ b u(ty)t 

=/ 人 的 dy (5.19) 

当 一 oo 时 ,左边 趋 于 ar, 对 于 充分 大 的 被 积 函 数 是 单调 的 ， 于 是 

(5.16) 昔 仿 当 上 一 oo 时 被 积 西数 是 有 界 的 . 因此 ,根据 8.6 节 的 选择 定理 ， 存 在 这 
样 的 序列 和, 如,，… 一 co, 使 得 当 + 跑 饥 这 个 序列 时 ,在 所 有 的 连续 点 上 有 

vw) (5.20) 


由 此 推出 , 在 a,5 上 的 积分 等 于 bP - ar， 从 而 %(y) = py2-!， 因 为 这 个 极限 是 
与 序列 {tk} 无 关 的 ， 所 以 关系 式 (5.20) 对 任意 的 通 近 t 一 oo 都 成 立 ， 并 且 对 于 
= 1 它 化 成 (5.18). p> 
例 (c) ”对 一 个 特征 函数 为 p 的 概率 分 布 F, 我 们 有 [ 见 (2.7)] 


Fh -ros=h -eX (5.21) 


@ 这 包括 了 良 道 (E. Landau) 的 著名 的 陶 伯 定理 . 我 们 的 证 明 可 以 作为 怎样 利用 选择 定理 排除 分 析 上 
的 困难 的 新 例子 . 
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因为 1 一 下 是 单调 的 , 所 以 关系 式 


1—-pN)~NPLOI/N) 和 1 F(z)~ 了 (5.22) 


(p > 0) 是 等 价 的 . 下 节 将 说 明 这 个 例子 的 用 处 . p> 
本 定理 的 用 处 将 在 下 节 中 举例 说 明 . 最 后 我 们 来 说 明 怎样 利用 定理 2 导出 一 

个 关于 等 级 数 的 陶 伯 定理 . [ 它 曾 被 用 于 12.8 节 , (8.10) 中 并 将 被 用 于 17.5 节 中 . ] 

定理 5 邻 gn > 0, 假设 


Q(s) = we (5.23) 
n=0 
对 于 0<s<1 收敛. 如 果 工 在 无 穷 远 处 是 缓慢 变化 的 , 且 0 < p < oo0, 那么 下 列 
两 个 关系 式 了 
Q(s)~ 二 yt ( 吉 ) ， 5 一 1 一 (5.24) 
加 1 
go 十 和 十 … 十 gn-1 信 ECOTDY I 寻 一 oo (5.25) 


是 相互 等 价 的 . 
更 进一步 ， 如果 序 列 {qn} 是 单调 的 ， 且 0 < P < oo， 那么 (5.24) 等 价 于 


gn~ To， n+ 00. (5.26) 
证 设 U 是 一 个 密度 为 
Mu(z) = gn (5.27) 
(其 中 ng z<n+t1) 的 测度 . (5. 2 的 左边 等 于 ee My 的 拉 普 拉 斯 变换 w 为 
w= Doe le Qe’). (5.28) 


于 是 可 见 关 系 式 (5.24) 和 (5.25) 分 别 等 价 于 (5.15) 和 (5.16). 因此 , 根据 定理 2， 加 
们 是 相互 等 价 的 . 类 似 地 ，(5.26) 是 定理 4 的 直接 推论 . 

例 (d) 设 om=mne iinn, 其 中 p>0,a 是 任意 的 .序列 {qn} 是 最 终 单调 的 ， 因 
此 (5.24) 对 工 (= FT(o)lnet 成 立 . Pp 


“13.6 稳定 分 布 


为 了 说 明 陶 伯 定 理 的 用 处 ,我 们 现在 来 推导 集中 于 0,00 上 的 最 一 般 的 稳定 分 
布 , 并 给 出 它 的 吸引 范围 的 全 部 特征 . 与 不 集中 于 0 co 上 的 分 布 所 需要 的 方法 相 
比 , 证 明 是 非常 简单 明了 的 . 

* 除 了 (6.2) 外 , 本 节 的 结果 已 在 第 9 章 并 将 在 第 17 章 独立 地 导出 ， 稳 定 分 布 已 在 6.1 节 中 引进 . 
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定理 1 对 于 国定 的 0< a < 1, 函数 ra(A) =e^ 是 一 个 具有 下 列 性 质 的 分 布 Ga 的 
拉 普 拉 斯 变换 : 

Go 是 稳定 的 ,更 确切 地 说 ,如果 XX1,… ,Xn 是 有 共同 分 布 Ga 的 独立 变量 , 那 
么 (Na 十 … 十 Xn)/nle 的 分 布 也 为 Gu. 


ze[1 -Ga(z)] 一 去 一 oo， (6.1) 


1 
(1-o)’ 
@ “Ga(2)—0, 2z—0. (6.2) 
证 根据 13.4 节 的 准则 2, 函数 va 是 完全 单调 的 , 因为 e~* 是 完全 单调 的 , A* 有 
完全 单调 的 导数 . 由 于 va(0) = 1, 所 以 拉 普 拉 斯 变换 为 va 的 测度 Ga 的 总 质量 为 
1. 因为 3() = va(ni/* 和 ), 所 以 所 断言 的 稳定 性 是 显然 的 
(6.1) 是 (5.22) 的 一 个 特殊 情形 , (6.2) 是 上 节 定 理 3 和 定理 1 的 系 的 一 个 直接 
推论 . p 
定理 2 ”假设 已 是 一 个 集中 于 矶 65 上 的 概率 分 布 , 使 得 (在 连续 点 上 ) 


Fr*#(anz) 一 G(z)， (6.3) 


其 中 G 是 一 个 不 集中 于 一 点 上 的 正常 分 布 ， 那 么 
(a) 存在 一 个 在 无 穷 远 处 缓慢 变化 的 函数 也 @ 和 满足 0 < a <1 的 常数 a, 使 


得 
1 一 Flz)~ 各 的 ， z 一 oo. (6.4) 
(b) 反之 , 如 果 已 具有 (6.4) 的 形式 , 那么 可 以 选取 这 样 的 an, 使 得 
nLen) 1, (6.5) 


an 
并 且 在 这 种 情形 下 , (6.3) 对 G = Ga 成 立 . 
这 殖 含 (6.3) 中 的 可 能 的 极限 G 与 某 个 G。 只 是 尺度 因子 有 所 不 同 . 由 此 特别 
推出 ,不 存在 其 他 的 集中 于 “0,00 上 的 稳定 分 布 .( 见 8.2 节 中 的 引 理 1. ) 
证 如 果 w 和 vw 是 下 和 G 的 拉 普 拉 斯 变换 , 那么 (6.3) 等 价 于 
—nlnp(Aan) 一 一 Inv( 和 ). (6.6) 
根据 8.8 节 的 简单 定理 , 这 蕴含 -Iny 在 原点 处 是 缓慢 变化 的 , 即 
—InpO) ~ XL(1/A), A—=0, (6.7) 
@ 即 工 满足 (5.14). (6.4) 中 的 正规 化 因子 T(1 一 a) 是 为 了 方便 而 引入 的 , 它 只 影响 到 记号 . 
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其 中 工 在 无 穷 远 处 缓慢 变化 , 且 a > 0. 于 是 由 (6.6) 可 得 -lnv(A) = CX*. 因为 
G 不 集中 于 一 点 上 , 所 以 我 们 有 0< a <1. 


(6.7) 效仿 1-9N ei (3 RD (6.8) 
各 -ea 人 -as 


由 (5.22) 知 , 关系 式 (6.4) 和 (6.8) 是 等 价 的 . 因此 由 (6.1) 可 推出 (6.4). 
对 于 北部 分 , 我 们 从 (6.4) 出 发 , 刚才 已 证 明 (6.4) 蕴含 (6.8). 对 于 固定 的 mn， 
把 an 定义 为 使 nll 一 F(z)] < 1/T(1 一 a) 的 z 的 下 界 . 于 是 (6.5) 成 立 . 利用 这 点 和 
工 的 缓慢 变化 性 , 我 们 从 (6.4) 可 知 ， 
1— pMNan) ~ Nan "Lan/N) ~ Am. (6.9) 


由 此 推出 (6.6) 的 左边 趋 于 X*, 这 就 完成 了 证 明 . p- 
(关于 最 大 项 的 影响 , 见习 题 26.) 
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根据 6.3 节 中 的 定义 ,为 使 一 个 拉 普 拉 斯 变换 为 w 的 概率 分 布 U0 是 无 穷 可 分 
的 ， 当 且 仅 当 对 于 n = 1,2,…, 正 n 次 根 wn = wi" 是 一 个 概率 分 布 的 拉 普 拉 斯 
变换 . 
定理 1 浮 数 山 是 一 个 无 穷 可 分 分 布 的 拉 普 拉 斯 变换 ， 当 且 仅 当 ww 二 e ,其 中 少 
有 完全 单调 的 导数 ， 且 (0) = 0. 
证 利用 13.4 节 的 准则 2, 可 见 在 %(0) =0 且 少 是 完全 单调 时 , wn =e-V/" 是 一 
个 概率 分 布 的 拉 普 拉 斯 变换 ,因此 条 件 是 充分 的 . 

为 了 证 明 条 件 的 必要 性 , 假设 对 于 每 个 n,w = e-*/" 是 一 个 概率 分 布 的 拉 普 
拉 斯 变换 , 令 

Yn(N) = nl 一 wm(A)]， (7.1) 

那么 加 一 多 而 且 导数 妨 = 一 nw 是 完全 单调 的 . 根据 中 值 定理 yn(A) = 
(9A) > AW(A)， 因 为 Vn 一 峭 , 所 以 这 蕴含 序列 {wi.()} 对 于 每 个 固定 的 入 > 0 
都 是 有 界 的 . 因此 ， 可 以 选 出 一 个 收敛 的 子 序列 , 根据 广义 连续 性 定理 ， 其 极限 自 
然 是 完全 单调 的 . 因此 , 水 是 一 个 完全 单调 函数 的 积分 ,这 就 完成 了 证 明 . > 

这 个 定理 的 另外 一 种 形式 是 
定理 2 ”函数 w 是 一 个 无 穷 可 分 分 布 的 拉 普 拉 斯 变换 ， 当 且 仅 当 它 具 有 二 e-* 
的 形式 , 其 中 


z 


oo 1 ee- 
v=/ 二 “一 Pin (9 
2 0 
* 此 节 初 读 时 可 咯 去 . 
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并 且 书 是 一 个 使 得 四 
站 z-1P{dz} < oo (73) 
1 


的 测度 . 

证 “由 完全 单调 函数 的 表示 定理 ， 定 理 1 的 条 件 可 以 重新 叙述 为 我 们 必须 有 

vy(0)=0, 且 
w=/ Pes), (74) 


其 中 尸 是 一 个 测度 . 在 a 点 截断 积分 , 把 等 号 变 为 >, 这 就 蕴含 , 对 于 每 个 a > 0( 因 
为 被 积 函数 是 有 界 的 )， 
‘a1—e- 
YA> er{ar}. (75) 
由 此 推出 (7.2) 是 有 意义 的 , 条 件 (7.3) 是 满足 的 . 于 是 利用 形式 微分 可 以 证 明 (7.2) 
是 (7.4) 的 积分 , 它 在 0 点 等 于 0. p 
[见习 题 17~ 习题 23 和 13.9 节 例 (a). ] 
例 (a) ”复合 泊 松 分 布 
U= o> TI (7.6) 
的 拉 普 拉 斯 变换 为 e-“+ew, (7.2) 对 于 P{dz} = czF{dz} 是 正确 的 . 
例 (b) T 密度 zo-!e-</T(a) 的 拉 普 拉 斯 变换 为 w(A) = 1/( 和 二)*. 这 里 
oo ] 一 er i 
VN) =af 一 0 (7.7) 
因为 (和) = a(A+ D7! =w (A)/w(N). 
例 (c) ”稳定 分 布 . 对 13.6 节 的 变换 w = e- ,我 们 有 %(A) = Xe, 上 且 
a 1—e-* 


a 一 
a ~ Tl-oaJo zot! 


dz, (7.8) 
正如 利用 微分 法 看 到 的 那样 . 
例 (d) 贝 宣 尔 函数 . 考虑 13.3 节 例 (d) 中 具有 拉 普 拉 斯 变换 (3.10) 的 密度 w. 由 
(3.10) 的 形式 显然 可 见 ，w 是 wyn 与 它 本 身 的 n 重 卷 积 ， 从 而 是 无 穷 可 分 的 . 形 
式 上 的 微分 说 明 , 在 这 种 情形 下 , 多 (A) = r/VQXA+1)5 = 1, 并 且 容 易 证 明 (见习 题 
6)w 具有 (7.4) 的 形式 , 其 中 


P{fdz} = re ”Io(z)dz. 
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例 (e) ”从 属性 . 由 13.4 节 的 准则 容易 看 出 ,如 果 加 和 wo 是 具有 完全 单调 导数 
的 正 函 数 , 那么 复合 函数 %(A) = 1(w2()) 也 是 具有 完全 单调 导数 的 正 函 数 , 对 应 
的 无 穷 可 分 分 布 特别 重要 . 为 了 求 出 它 , 用 QM 表示 拉 普 拉 斯 变换 为 ei 中 (其 中 
$= 二 1,2) 的 概率 分 布 , 并 令 


Us(z) = / ~ oP oD {as}. (7.9) 
0 
(于 是 分 布 Vi 是 通过 把 QP) 中 的 参数 s 随机 化 而 得 到 的 . )U 的 拉 普 拉 斯 变换 为 
we(A) = | eewgtDfdsl = et. (7.10) 
0 


读 过 10.7 节 的 读者 可 看 出 (7.9) 中 过 程 的 从 属 关系 : Ui 通过 指导 过 程 ld 从 
属于 QL*. 由 此 我 们 可 以 看 到 , 我 们 多 么 容易 地 求 出 了 新 过 程 的 拉 普 拉 斯 变换 ， 虽 
然 我 们 只 对 分 布 Qf2 是 集中 于 正 半 轴 上 这 一 特殊 情形 进行 了 讨论 . 

有 一 种 特殊 的 情形 值得 注意 : 如 果 如 (A) = Xe,Wa(A) = Xe， 那么 pA) = Xep. 
因此 , 一 个 由 稳定 的 8 过 程 指导 的 稳定 a 过 程 可 导致 一 个 稳定 的 a6 过 程 . 读者 应 
当 验 证 , 这 个 结论 在 本 质 上 重复 了 习题 10 的 断言 . 关于 更 一 般 的 命题 , 见 例 6.2 节 
(h). 

例 (f) ”指数 分 布 的 每 一 种 混合 都 是 无 穷 可 分 的 @. 这 种 混合 的 最 一 般 的 分 布 具有 
如 下 形式 的 密度 : 


f(z) = / ™ ge-U {ds)}, (0.1D 


其 中 U 是 一 个 概率 分 布 ， 在 13.3 节 例 (f) 中 已 经 证 明 : 当 U 集中 于 有 限 个 点 
0< al <…< an 上 时 , 拉 普 拉 斯 变换 具有 形式 
A+th 入 十 如 -1 1 


(7.12) 


其 中 ak < bk < ak+1l. 由 于 
d, A+bx 1 1 


TO Arar Mtar Arb 
bk — Qk 


TQ+ar)(N+ or) 
是 两 个 完全 单调 函数 的 乘积 , 所 以 它 本 身 也 是 完全 单调 的 . 由 此 推出 (7.12) 中 每 个 
因子 都 是 无 穷 可 分 的 , 因此 2 也 是 无 穷 可 分 的 . 对 于 一 般 的 混合 ,本 断言 可 通过 简 
单 的 取 极限 推出 (见习 题 20~ 习题 23). > 


@ 这 个 出 人 意料 的 结果 应 归功 于 F. W. Steutel, Ann. Math. Statist., vol. 40(1969)pp，1130 一 
1131 和 vol 38(1967)pp. 1303 一 1305. 


(7.13) 
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*13.8 高 维 情 形 


向 高 维 的 推广 是 显然 的 : 如 果 把 z 解释 为 列 矩 阵 (zl …,zn)， 把 入 解释 为 行 
矩阵 (和 1…, 和 n), 那么 甚至 连 定义 也 不 需要 改变 . 于 是 


Mr = 和 lzl 十 … 十 Xnzn 
是 入 和 z 的 内 积 . 在 概率 论 中 多 维 变换 的 用 处 是 有 限 的 . 
例 (a) ” 预 解 方程 . 设 f 是 一 个 具有 普通 拉 普 拉 斯 变换 2(A) 的 一 维 连续 函数 . 考 
虚 两 个 变量 s,t 的 函数 f(s 二. 它 的 二 维 变换 为 
af 一 入 3 一 zt 
加 所 人/ [ ert f(s + t)dsdt. (8.1) 
经 过 变量 替换 s+t = z 和 一 s+t=y 后 , 这 个 积分 化 为 
/x et(CA+oOzp(z)dz 三 e30-—)vay 


/ (er -ez)j(aldz. 


本 

于 是 

w(Nz) = 一 2 (8.2) 

我 们 将 在 更 一 般 的 背景 下 再 次 遇 到 这 个 关系 式 ， 那 时 它 将 作为 半 群 基本 预 解 方程 
出 现 [ 见 (10.5) 和 13.10 节 最 后 的 说 明 ]. 


例 (b) 米 塔 - 列 夫 鞠 (Mittag-Lefaer) 函数 . 本 例 说 明 可 把 高 维 变换 作为 计算 简 
单 变换 的 工具 . 我 们 将 证 明 下 列 命题 . 
如 果 羽 是 稳定 的 , 且 它 的 拉 普 拉 斯 变换 为 e- ， 那 么 分 布 


Gi(z)=1— Flt/zlye)，z>0 (8.3) 
(是 国定 的 ) 的 拉 普 拉 斯 变换 为 米 塔 - 列 夫 勒 函数 
2 a 
> Ts ey 了 (8.4) 


这 个 结果 是 相当 重要 的 ,因为 在 许多 极限 定理 中 G 和 下 一 道 出 现 [例如 , 见 
11.5 节 (5.6)]. 直接 的 计算 似乎 是 很 困难 的 , 但 是 按照 下 述 方式 进行 将 是 很 容易 的 . 
* 此 节 初 读 时 可 略 去 . 
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首先 固定 z, 取 + 上 为 变量 . Gi(z) 的 普通 拉 普 拉 斯 变换 4.(v)( 其 中 v 是 变量 ) 显然 是 
(1 一 e*?)/v. 除了 正规 化 因子 v 外 ,这 是 一 个 以 z 为 变量 的 分 布 函数 ， 它 的 拉 普 
拉 斯 变换 显然 是 


yo-1 
癌 芭 - (8.5) 
这 是 (8.3) 的 二 元 变换 . 在 理论 上 这 可 通过 先 取 关于 z 的 变换 ， 后 取 关 于 t 的 变换 
而 算出 ， 从 而 (8.5) 是 我 们 要 求 的 变换 关于 t 的 变换 . 但 是 把 (8.5) 展开 成 几何 级 
数 , 我们 可 看 出 实际 上 (8.5) 是 (8.4) 的 变换 ,从 而 这 个 命题 得 证 . 
米 塔 - 列 夫 勒 函数 (8.4) 是 指数 函数 的 推广 , 当 a = 1 时 它 就 化 为 指数 函数 . > 


13.9 ” 半 群 的 拉 普 拉 斯 变换 


拉 普 拉 斯 积分 的 概念 可 以 推广 到 抽象 值 函 数 和 积分 , ?但 是 我 们 只 考虑 与 马尔 
可 夫 过 程 有 关 的 变换 半 群 的 拉 普 拉 斯 变换 .? 我们 仍 用 10.8 节 中 的 约定 和 记号 . 

设 忆 是 一 个 空间 (例如 直线 、 区 间或 全 体 整 数 ), 2 是 由 号 上 的 有 界 函 数组 成 
的 一 个 巴 拿 赫 空间 , 其 范 数 为 |lu|| = sup |uw(z)|. 我 们 假设 , 如 果 有 ue .2, 那么 也 
有 lul € 儿 . 设 {D9(t),t > 0} 是 多 上 的 一 个 连续 收缩 半 群 ， 换 句 话 说 ,我们 假设 
对 于 we .存在 一 个 函数 吕 (tju € 名 ,而且 名 (t) 具有 下 列 性 质 : 0 < u < 1 蕴含 
0< Qu <1;Q(t+s) = (tN();(h) -= (0) = 1, 1 是 恒 等 算 子 .9 

我 们 从 定义 积分 开始 . 给 定 下 co 上 的 任 一 概率 分 布 下 ,我们 想 要 定义 一 个 从 
院 到 2 的 收缩 算 子 妃 , 将 它 表示 为 


E= 六 alsjFtds}， (9.1) 


使 得 a 
QE = ED 人) = 人/ Q(t+s)P{ds}. (9.2) 
0 


(要 记 住 对 分 布 的 依赖 性 . ) . 
对 于 与 转移 概率 为 Q:(z, 了) 的 马尔 可 夫 过 程 有 关 的 半 群 , 这 个 算 子 可 由 下 
列 随机 核 或 次 随机 核 导 出 : 


[ Qe rtasy. (0.3) 


@ S. Bochner 在 Completely monotone functions in partially ordered spaces ( 见 Duke Math. 
J., vol, 9(1942)519 一 526) 一 文中 发 展 了 一 个 包括 形 如 (9.6) 的 变换 的 富有 成 果 的 理论 ， 关 于 向 任 
意 算 子 族 的 推广 , 见 EE. Hille 和 R. S. Phillips 合 著 的 书 (1957). 
@ 14.7 节 中 的 最 小 解 的 构造 可 以 作为 本 方法 的 典型 例子 
@@ 回忆 10.8 节 , 自 同 态 的 强 收敛 Th 一 T, 就 是 对 于 所 有 的 u € - 乡 ,Thu 一 Tl| 一 0. 我 们 的 “ 连 
续 " 是 “在 t 之 0 上 强 连 续 " 的 缩写 语 . 
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如 果 五 是 原子 型 分 布 , 那么 可 以 给 算 子 已 下 一 个 很 自然 的 (几乎 是 微不足道 
的 ) 定义 , 简单 的 取 极 限 手 续 就 可 导致 我 们 想 要 得 到 的 下 列 定义 . 
设 p;>0 且 pi+… 十 pr =1. 线性 组 合 


E=nAQ(t)+.…+prQ(tr) (9.4) 


仍 是 一 个 收缩 算 子 , 可 以 看 作 是 Q(t) 关于 对 二 赋予 质量 p; 的 概率 分 布 的 期 望 . 这 
对 有 限 离散 分 布 的 特殊 情形 定义 了 (9.1), 并 且 (9.2) 是 正确 的 . 一 般 的 期 望 (9.1) 可 
像 复 曼 积分 那样 通过 取 极 限 来 定义 : 把 0,00 分 成 区 间 厂 … ,五 , 选取 必 ,所 
构成 的 黎 曼 和 沁 避 (tk)F{I} 是 一 个 收缩 算 子 . 由 10.8 节 (8.7) 一 致 连续 性 看 出 , 热 
悉 的 收敛 性 证 明 仍然 有 效 . 这 把 (9.1) 定义 为 波 赫 纳 积 分 的 一 个 特殊 情形 . 

如 果 半 群 由 推移 算 子 组 成 ， 即 对 于 所 有 的 t, 吕 (t)1 = 1, 那么 B1 = 1. 对 于 书 ， 
我 们 将 利用 记号 (9.1), 对 于 函数 Bw 我 们 将 利用 通常 的 符号 


Bu = 人/ “oou. Pd (9.5) 
0 


(虽然 从 逻辑 上 讲 把 w 写 在 积分 外 更 一 致 ). Bw(z) 在 给 定点 > 上 的 值 是 数值 函数 
只 (s)w(z) 关于 下 的 普通 期 望 . 
在 F{ds} = e-*ds 的 特殊 情形 , 算 子 巨 称 为 半 群 的 拉 普 拉 斯 积分 或 预 解 算 
子 . 它 将 被 表示 为 二 
R(A) = 人 eols)ds， 入 > 0. (9.6) 


由 (9.2) 看 出 ， 预 解 算 子 R( 和 ) 和 半 群 中 的 算 子 Q(t) 是 交换 的 . 为 使 R(X)1 = 1， 
当 且 仅 当 对 于 所 有 的 纪 品 (1 = 1， 因 此 为 使 收缩 算 子 MR( 和 A) 是 推移 算 子 ， 当 上 且 仅 
当 所 有 的 吕 (s) 都 是 推移 算 子 . 

引 理 ”如 果 我 们 知道 了 RQ(A)w 对 于 所 有 的 入 > 0 和 we .的 值 ， 那么 我 们 就 叭 
一 地 确定 了 半 群 . 

证 “在 给 定点 > 上 的 值 


RMN)w(z) = A ~ estg(t)w(z)dt 


是 由 只 (#)w(t) 所 定义 的 t 的 数值 函数 的 普通 拉 普 拉 斯 变换 . 因为 这 个 函数 是 连续 
的 , 所 以 它 被 它 的 拉 普 拉 斯 变换 唯一 确定 ( 见 13.1 节 的 系 ). 因此 ,对 于 所 有 的 上 a 
所 有 的 we 经 ,Qtbuw 是 唯一 确定 的 . 

拉 普 拉 斯 变换 (9.6) 可 导致 关于 半 群 无 穷 小 生成 元 的 特征 的 一 个 简单 描 壕 
根据 10.10 节 中 这 个 算 子 的 定义 , 我 们 有 


2 1, i 0 (9.7) 
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只 要 slu 存在 ( 即 只 要 两 边 之 差 的 范 数 趋 于 0). 
定理 1 对 于 固定 的 入 >0, 为 使 


w= RMN)w, (9.8) 
当 且 仅 当 于 在 妇 的 定义 城中 且 
Mi — Su = ww. (9.9) 
证 (i) 用 (9.8) 定义 4. 利用 期 望 的 性 质 (9.2), 我 们 可 得 
2 1, = [ es(s+h)wds — 人 “ads)uds (9.10) 
在 第 1 个 积分 中 引入 变量 替换 s 十 h =t 使 上 式 化 成 
320 -1, = ee / eso(t)wdt — : / "ndg(wat 
exh 一 1 


= (uA -3 NAA Qt)w — wdt. (9.11) 
= 划一 天 上 e tw — tw)dt. (9. 


因为 当 t 一 0 时 , || 吕 (tjw 一 wll 一 0, 所 以 右边 第 2 项 依 范 数 趋 于 0, 从 而 整个 右边 
趋 于 Xu 一 和 -1w). 因此 (9.9) 是 正确 的 . 
(说 反之 , 假设 stu 存在 , 即 (9.7) 成 立 . 因为 MR( 和 A) 是 一 个 与 半 群 可 交换 的 收 
缩 算 子 , 所 以 (9.7) 列 含 
2 二 一 lg(A)u — RA)Uu. (9.12) 
但 是 我 们 刚才 看 到 左边 趋 于 MR(A)uw 一 u, 结果 所 得 的 恒等式 把 表示 为 (9.9) 中 函 
数 w 的 拉 普 拉 斯 变换 . > 
村 1 对 于 给 定 的 Ww E .2 (9.9) 存在 唯一 的 一 个 解 以 . 
系 2 两 个 不 同 的 半 群 不 可 能 有 相同 的 生成 元 红 . 
证 ”当知 道生 成 元 和 时 , 我 们 可 以 对 所 有 的 we . 求 出 拉 普 拉 斯 变换 R(A)w. 根 
据 上 一 引 理 , 这 就 唯一 地 确定 了 这 个 半 群 的 所 有 算 子 . p 
人 们 可 能 很 想 推导 类 似 于 13.5 节 中 诸 定 理 的 陶 伯 定理 , 但 是 我 们 将 满足 于 下 
面相 当 基 本 的 
定理 2 当 入 一 co 时 ， 
MN 一 工 (9.13) 
证 对 于 任意 的 we 乡 , 我 们 有 


IDRO)w wll < 人/ ow-wll Aha + (914) 
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当 入 一 co 时, 密度 为 Xe 的 概率 分 布 趋 于 集中 在 原点 上 的 分 布 . 被 积 函数 是 有 
界 的 , 且 当 t 一 0 时 趋 于 0, 从 而 积分 趋 于 0, (9.13) 成 立 . > 
系 3 生成 元 天 的 定义 域 在 2 中 稠密 . 
证 由 (9.13) 推出 , 每 个 we 乡 都 是 一 个 由 形 如 MA(A)w 计生 要 
极限 , 根据 定理 1, 这 些 元 素 都 在 4 的 定义 域 中 . 
例 (a) 无 穷 可 分 半 群 . 设 U 是 具有 (7.2) 所 述 的 拉 普 拉 斯 变换 w = e-* 的 天 可 
分 分 布 . 

拉 普 拉 斯 变换 为 


人/ ezUi{fdrl = et = exp 人 (- :/ 下 于 一 etaz) (9.15) 


的 分 布 Us 也 是 无 穷 可 分 的 ， 有 关 的 卷 积 算 子 L(t) 构成 一 个 半 群 . 为 了 求 出 它 的 生 
成 元 9 , 选取 一 个 有 界 连续 可 微 函数 v. 那么 , 显然 有 


= 1 / CE 四 一 世人 Juvr{dy). (9.16) 


对 (9.15) 取 微分 可 证 明 测度 二 1yUr{dy} 的 变换 为 (Ae-%， 当 二 一 0 时 ， 
We-%9 趋 于 (A). 但 是 w 是 测度 P 的 变换 ， 从 而 我 们 的 测度 趋 于 P. 因为 
上 式 积分 号 下 的 分 式 (对 于 固定 的 z) 是 y 的 有 界 连续 函数 ,所 以 我 们 得 到 


Sv(z) = 人/ 和- 加 Pldn， (9.17) 


这 样 我 们 的 无 穷 可 分 分 布 的 典型 表示 给 出 了 测度 P 的 一 种 解释 . 

例 (b) 从属 半 群 . 设 { 安 区 } 表示 一 个 任意 的 马尔 可 夫 半 群 , 设 Ut 是 上 例 中 的 无 
穷 可 分 分 布 . 正如 10.7 节 所 说 明 的 那样 , 可 以 通过 把 参数 上 随机 化 而 得 到 一 个 新 的 
马尔 可 夫 半 群 . 用 现在 的 记号 有 


D*(b) = 人/ ”Djufdsj. (9.18) 
为 了 简单 起 见 , 令 
V(s,z) = 20- 070), (9.19) 
我 们 有 A 
EO-1,0) = 人/ Vs,2) ta (9.20) 


@ 这 个 推导 是 为 了 举例 说 明 而 给 出 的 . 这 个 生成 元 早 在 第 9 章 中 已 经 知道 了 ,可 以 通过 复合 泊 松 分 布 
取 极 限 而 得 到 . 
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对 于 妇 的 定义 域 中 的 一 个 函数 v 和 一 个 固定 的 z, 函数 V 是 处 处 连续 的 (包括 原点 )， 
因为 当 s 一 0 时 V(s,z) 一 tu(z). 我 们 在 上 例 中 已 看 到 , 当 t 一 0 时 , tlsUs{ds} 一 
P{ds}. 于 是 (9.20) 的 左边 趋 于 一 个 极限 ,从 而 st*v 存在 并 且 为 


sv(z) = 人/ Vls,z)P{ds}. (9.21) 


结论 是 , 4 的 定义 域 和 i 的 定义 域 是 一 致 的 ,并 且 在 (9.21) 对 于 红 的 定义 域 中 的 u 
成 立 的 意义 上 有 Es 
r= 人/ 9G=1plds}. (9.22) > 
0 3 


13.10 ” 希 尔 - 吉田 定理 


著名 的 极其 有 用 的 希 尔 - 吉田 定理 刻 划 了 任意 变换 半 群 的 生成 元 的 特征 , 但 
是 我 们 将 只 对 收缩 算 子 半 群 讨论 此 定理 . 定理 断言 , 上 节 中 得 到 的 生成 元 的 性 质 不 
仅 是 必要 条 件 ， 而 且 也 是 充分 条 件 . 
定理 1 ( 希 尔 -吉田 (Hille-yosida)) 为 使 一 个 定义 域 为 2' C .2 的 算 子 其 是 一 个 
由 多 上 的 收缩 算 子 中 (( 其 中 名 (0) = 1) 构成 的 连续 半 群 的 生成 元 ， 当 且 仅 当 它 具 
有 下 列 性 质 : 

(iD 对 于 每 一 个 WE 多 , 方程 

和 Xu 一 Wu =w， 入 >0 (10.1) 
恰 有 一 个 解 必 

(ii) 如果 0 < w < 1, 那么 0 < Au < 1; 

( 道 ) 4 的 定义 域 .Z' 在 2 中 是 稠密 的 . 

我 们 已 经 知道 , 每 个 生成 元 都 具有 这 些 性 质 ， 从 而 条 件 是 必要 的 . 此 外 ,如果 
把 解 4 表 示 为 4 = R( 和 A)w, 那么 我 们 就 可 知道 R( 和 ) 与 拉 普 拉 斯 变换 (9.6) 一 致 , 因 
此 可 以 把 定理 的 条 件 改 述 如 下 . 

(i) 算 子 (和 ) 满足 恒等式 


RA) — LR(N) =1. (10.2) 


RA) 的 定义 域 是 多, 值 域 与 4 的 定义 域 2' 一 致 . 
(i) 算 子 XR(A) 是 一 个 收缩 算 子 . 
(ii') H(A) 的 值 域 在 . 乡 中 是 稠密 的 . 
我 们 从 12.9 节 定 理 2 知道 , R( 和 ) 一 定 满足 另 一 个 条 件 


AMRO 一 1， 入 一 oo. (10.3) 
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这 蕴含 每 个 4 是 它 自己 的 变换 的 极限 ,从 而 R(^) 的 值 域 -2' 是 稠密 的 . 由 此 
推出 可 用 (10.3) 代替 (i'), 于 是 定理 的 3 个 条 件 完全 等 价 于 条 件 组 (i)、(ii)、(10.3). 
现在 假设 已 给 出 一 个 具有 这 些 性 质 的 算 子 族 P(A), 我 们 着 手 把 所 要 求 的 半 群 
构造 为 一 族 伪 泊 松 半 群 的 极限 . 构造 依赖 于 
引 理 1 如果 忆 属于 下 的 定义 域 2'， 那么 


LRNw = ROA. (10.4) 
算 子 只 (入 ) 和 RR(v) 是 可 交换 的 且 满 足 预 解 方程 
RN) — RV) = (v — NSR(CA)9(). (10.5) 


证 设 v=sw. 因为 w 和 w 都 属于 鼠 的 定义 域 .2', 所 以 由 (10.1) 推出 v 也 属于 
芷 的 定义 域 2', 并 且 
Xu 一 = Llw. 


于 是 v= 只 (NA)Uuw, 此 式 与 (10.4) 相同 . 
其 次 , 把 z 定义 为 vz 一 4lz = w 的 唯一 解 . 从 (10.1) 中 减 去 z, 经 过 简单 的 重 
新 排列 后 我 们 得 到 
Mu =z) — Lu—z) = (v — Nz, 


此 式 和 (10.5) 相同 . 这 个 恒等式 的 对 称 性 蕴含 算 子 是 可 交换 的 . p 
为 了 构造 我 们 的 半 群 我 们 回忆 一 下 10.9 节 的 定理 1， 对 于 任 一 收缩 算 子 了 
和 a > 0, 存在 一 个 相应 的 收缩 算 子 半 群 


eT) = on D> QT. (10.6) 
n=0 


这 个 半 群 的 生成 元 是 a(T 一 1), 它 是 一 个 自 同 态 . 
我 们 把 这 个 结果 应 用 于 T= XR(A). 为 了 简单 起 见 , 令 


5 = ADROA) = 1] = MIRA), DA(b = es. (10.7) 


这 些 对 和 > 0 定义 的 算 子 是 彼此 可 交换 的 . 对 于 固定 的 和 , 算 子 4 产生 一 个 由 收 
缩 算 子 Dx(b) 构成 的 拟 泊 松 半 群 . 

由 (10.4) 推出 , 对 于 给 定 的 算 子 女 的 定义 域 乡 ' 中 的 所 有 的 4, tu 一 如:, 我 
们 可 以 忽略 WU 的 特殊 定义 , 而 把 希 尔 - 吉田 定理 的 其 余 断 言 看 作 一 个 有 用 的 更 一 
般 的 极限 定理 的 特殊 情形 . 其 中 和 可 以 限制 于 整数 序列 . 
通 近 引 理 2 ” 设 {名 A()} 是 一 族 梓 此 可 交换 的 由 自 同 态 HA 产生 的 伪 泊 松 半 群 . 
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如 果 对 于 一 般 稠密 集合 -多 ' 中 的 所 有 的 u,4lau 一 lu， 那么 
Dalt) = QH t= 0%0, (10.8) 


其 中 {全 (t)} 是 一 个 收缩 算 子 半 群 ,对 于 所 有 的 WE .2', 它 的 生成 元 与 一 致 . 
此 外 , 对 于 u € 22'， 


lu 一 Qu 和 tw 一 oz (10.9) 
证 ”对 于 两 个 可 交换 的 收缩 算 子 , 我 们 有 
8 一 1 一 (S" 1+..+T"1)(S —T7), 


从 而 
jls"u — Tull < nllSu — Tull (10.10) 


把 这 个 不 等 式 应 用 于 算 子 吕 A(t/n), 经 过 明显 的 重新 排列 后 得 到 


Iaxou- ovtdull < 


-| 


Qa(t/n)—1 
t/n < 
(10.11) 
令 n 一 00, 我 们 得 到 
Qu — Q(t ull < ta — Ly (10.12) 


这 说 明 对 于 we .2'， 当 和 一 co 时 序列 {名 X(t)u} 是 一 致 收敛 的 , 因为 2' 在 乡 中 
是 稠密 的 ， 所 以 这 个 一 致 收敛 可 以 扩展 到 所 有 的 4. 如 果 我 们 用 窟 (t)u 表示 这 个 极 
限 ， 那 么 我 们 就 得 到 一 个 使 (10.8) 成 立 的 收缩 算 子 吕 (t). 半 群 性 是 显然 的 . 同样 ， 
在 (10.2) 中 令 一 co, 我 们 得 到 (10.9). 像 (10.11) 那样 改写 左边 可 得 


= = 全 所- < lluu 一 sl. (10.13) 


取 入 充分 大 , 使 右边 < e. 对 于 充分 小 的 t, 左边 第 2 个 差 商 与 tu 之 差 的 范 数 小 
于 e, 从 而 它 与 th 之 差 的 范 数 小 于 3e. 因此 , 对 于 we 2 


= = lu, (10.14) 


这 就 完成 了 证 明 . p> 
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例 扩散 . 设 乡 是 直线 上 所 有 在 士 co 处 趋 于 零 的 连续 函数 所 构成 的 函数 族 . 为 了 
利用 通常 的 记号 , 我 们 把 和 换 为 h-?, 并 令 h 一 0. 把 差分 算 子 Vi 定义 为 


vau(z) = 起 | < Ce] (10.15) 


此 式 具有 h-?(T 一 1) 的 形式 , 其 中 了 是 一 个 推移 算 子 , 从 而 Vh 产生 一 个 由 推移 
算 子 组 成 的 半 群 ev*( 它 是 一 个 马尔 可 夫 半 群 ). 算 子 Vs 彼此 可 交换 , 对 于 一 、 二 、 
三 阶 导数 都 有 界 的 函数 ， 一 致 地 有 Vu 一 3 引 理 2 蕴含 存在 这 样 一 个 由 算 子 
并 产生 的 极限 半 群 { 避 (t)}, 使 得 至 少 在 4 充分 光滑 的 时 候 , Qu = je 

在 这 个 特殊 情形 下 ,我 们 知道 {Gb} 是 方差 为 t 的 正 态 分 布 的 卷 积 半 群 , 我 
们 并 没有 得 到 新 的 结果 . 但 这 个 例子 还 是 揭示 了 (有 时 ) 可 以 多 么 容易 地 证 明 具 有 


给 定 生 成 元 的 半 群 的 存在 性 . 例如 ,这 个 论证 可 应 用 于 更 一 般 的 微分 算 子 , 也 可 应 
用 于 边界 条 件 . (见习 题 24 和 习题 25. ) p 


关于 预 解 式 和 完全 单调 性 的 注 ” 希 尔 - 吉田 定理 强调 生成 元 的 性 质 , 但 是 可 以 这 样 重 
新 叙述 这 个 定理 ， 以 便 得 到 族 {B8(A)} 的 特征 描述 . 

定理 2 ( 希 尔 - 吉田 定理 的 另 一 种 形式 ，) 自 同 态 族 {98(A) : 和 > 0] 是 一 个 收缩 算 子 半 
群 { 品 (b)} 的 预 解 式 ， 当 且 仅 当 (a) 满足 预 解 方程 


RA) — RW) = (v — ROR), (10.16) 


(b) AR( 和 ) 是 一 个 收缩 算 子 ,(c) 当 入 一 co 时 , 和 R(X) 一 1 
证 (10.16) 与 (10.5) 相同 , 而 条 件 (b) 和 (e ) 与 (it) 和 (10.3) 相同 . 因而 这 3 个 条 件 都 
是 必要 的 . 

假设 条 件 成 立 , 我 们 定义 一 个 算 子 妇 如 下 . 选取 某 个 v > 0, 把 .2' 定义 为 R(v) 的 值 
域 ,也 就 是 说 , 为 使 ve -2'， 当 上 且 仅 当 存 在 we 儿 , 使 得 v = K(v)w. 对 于 这 样 的 w 我 
们 令 tu = Xu 一 w. 这 就 确定 了 一 个 定义 域 为 -2' 且 满 足 恒等式 


RV) — UR(V) =1 (10.17) 
的 算 子 处 我 们 来 证 明 这 个 恒等式 可 以 推广 到 所 有 的 和 ， 即 
RON) -LOR(A) = 1. (10.18) 
左边 可 以 改写 成 下 面 的 形式 
-ROA) 一 (一 区 只 CA) (10.19) 


利用 (10.16) 和 (v 一 人 DR(v) = 1 这 个 事实 , 我 们 得 到 


-RN) =1+ (v— NRA). (10.20) 


410 第 13 章 拉 普 拉 斯 变换 ， 陶 伯 定 理 ， 预 解 式 


利用 (10.19) 可 推出 恒等式 (10.18). 这 说 明 , 希 尔 - 吉田 定理 的 所 有 条 件 都 满足 , 这 就 完成 
了 证 明 . p> 

本 定理 说 明 整 个 半 群 理论 依赖 于 预 解 方程 (10.16), 因此 用 函数 的 普通 拉 普 拉 斯 来 说 明 
它 的 意义 将 是 很 有 趣 的 . 由 (10.16) 显然 可 见 , 在 v 一 入 时 R(v) 一 (A) 的 意义 上 , R( 和 A) 
连续 依赖 于 入 . 但 是 我 们 可 以 再 深入 一 步 , 用 


NO) = 1 0 -2 = -9t2() (10.21) 


定义 一 个 导数 RH'( 和 ). 同样 的 手续 说 明 右边 的 导数 为 -2R( 和 )R'( 和 ). 利用 归纳 法 可 见 H(A) 
有 各 阶 导数 只 (A), 并 且 
(—-D)"R™DA) = nNR"+1(N). (10.22) 
现在 设 u 是 - 纪 中 的 任 一 函数 ,使 得 0 < u < 1， 选取 一 个 任意 的 点 z 并 令 w( 和 ) = 
负 ( 和 A)u(z)，(10.22) 的 右边 是 一 个 范 数 < nl/A"+! 的 正 算 子 ， 从 而 w 是 完全 单调 的 ， 且 
Iw 中 OI < ny/X"+1, 于 是 由 13.4 节 中 的 系 推出 w 是 一 个 普通 的 拉 普 拉 斯 变换 ， 它 的 值 位 
于 0 和 1 之 间 . 如 果 我 们 用 从 (t)u(z) 表示 这 个 函数 , 那么 就 把 从 (t) 定义 成 了 一 个 收缩 算 
子 . 把 预 解 方程 (10.16) 和 (8.2) 进行 比较 ， 可 以 看 出 它 蕴 含 半 群 性 


Q(t+ s)u(z) = QQ(s)u(z). (10.23) 


因此 我 们 看 出 ， 只 利用 普通 函数 的 经 典 拉 普 拉 斯 变换 就 可 从 (10.16) 导出 半 群 理论 的 
主要 特征 . 特别 地 , 预 解 方程 只 不 过 是 13.8 节 例 (a) 的 一 种 抽象 形式 而 已 . 
为 了 进一步 强调 现在 的 抽象 理论 只 解释 了 关于 普通 拉 普 拉 斯 变换 的 定理 的 意义 ,我 们 
来 证 明 一 个 反 演 公式 . 
定理 3 对 于 固定 的 t > 0， 当 入 一 co 时 
(D+ 
(n— 1 


证 由 中 (和 ) 的 定义 (9.6)( 此 式 把 R( 和 ) 定义 为 Q(t) 的 拉 普 拉 斯 变换 ) 可 推出 


(-1)"R"(A) = [ 二 @ *s"Q(s)ds. (10.25) 
o 


RD nft) (n/t)” — Qt). (10.24) 


(10.24) 的 左边 是 只 (s) 关于 密度 nle-"/*(ns/t)"?/t(n 一 了 1 的 积分 ,此 密度 的 期 望 为 纪 
方差 为 如/n, 当 n 一 oo 时 , 这 个 测度 趋 于 集中 在 +t 上 的 分 布 . 由 名 (s) 的 连续 性 ,这 蕴含 
(10.24), 正如 函数 的 情形 那样 [公式 (10.24) 和 7.1 节 式 (1.6) 相同 ]. 


a 


13.11 习 题 


1. 设 Fo 是 一 个 对 点 ng(n = 0,1,…) 赋 对 质量 gqp" 的 几何 分 布 . 证 明 : 当 gq 一 0 时 , Fs 
趋 于 指数 分 布 1 -e“， 且 它 的 拉 普 拉 斯 变换 趋 于 1/( 和 十 1)- 


13.11 习 题 411 


La 


. 证明 : cosz 和 sinz 的 普通 拉 普 拉 斯 变换 为 M(X + D) 和 1 + D)， 以 及 (1 十 


a-?)e-*(1 一 cosaz) 是 一 个 拉 普 拉 斯 变换 为 (1 +a?)( 和 + TD-[(A+ 1)2 + ozj-: 的 概率 
密度 . 提示 : 利用 es = cosz +i sinz 或 连续 两 次 使 用 分 部 积分 公式 

设 忆 是 一 个 测度 U 的 变换 , 那么 在 而 1 和 To6 上 可 积 , 当 且 仅 当 1/z 分 别 在 06 
和 了 上 关于 可 积 . 

帕 塞 瓦尔 (Parseval) 关系 式 . 如 果 XX 和 了 是 独立 随机 变量 , 分 布 分 别 为 和 G, 变 
换 分 别 为 p 和 7, 那么 XY 的 变换 是 


三 wometan = 三 omPtay 
有 上 


. 设 下 是 一 个 变换 为 p 的 分 布 . 如 果 a > 0; 那么 p(X+a)/p(a) 是 分 布 e <Ffdzj/e(o) 


的 变换 . 对 于 固 的 上 > 0, 用 13.3 节 例 (b) 证 明 @， 
exp{—tV2A+ az + at} 
是 一 个 密度 为 
mca 
的 无 穷 可 分 分 布 的 变换 . 


.用 27 节 (7.0 定义 证 明 , 对 于 入 > 1, fo(z) 的 普通 拉 普 拉 斯 变换 是 wo(A) = 1/V 克 一 工 


2n) -1/2 
| tr 的 = ( a )e | 
续 . 证 明 用 = 石 ， 从 而 到 的 普通 拉 普 拉 斯 变换 为 ci(A) = wo(A)RCA)， 其 中 RX) = 
A—- VBE-1I. 


. 续 . 证 明 : 对 于 n= 1,2,…, 2In = In-1 十 In+1， 从 而 根据 归纳 法 ,I 的 普通 拉 普 拉 


斯 变换 为 wn(A) = wo( 和 )R"(A). 
由 13.3 节 例 (e) 通过 积分 证 明 : et/> 一 1 是 (2V3)/Vz 的 普通 拉 普 拉 斯 变换 


. 设 X 和 了 分 别 是 拉 普 拉 斯 变换 为 p 和 e ”的 独立 随机 变量 ， 则 XY!* 的 拉 普 拉 


斯 变换 为 P(X). 


:一 个 概率 分 布 的 密度 了 是 完全 单调 的 , 当 生 仅 当 它 是 指数 密度 的 混合 即 它 具 有 (7.11) 


的 形式 ]. 提示 : 利用 习题 3. 


. 在 9(A) =1/( 和 +1) 和 wp(A) = e 的 特殊 情形 下 直接 利用 计算 来 验证 反 演 公式 (4.5). 
. 证明 : 当 把 了 和 pl" 换 为 它们 的 绝对 值 时 ，13.4 节 中 的 系 仍然 成 立 . 
. 假设 e “In(z) 在 无 穷 远 处 是 单调 的 , 利用 习题 8 证 明 


er ~ He, £00. 


V2rz 


@ 这 个 公式 出 现在 应 用 中 , 已 多 次 被 导出 过 (所 利用 的 都 是 元 长 的 计算 ). 
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15. 


16. 
by 
18. 
19. 


20. 


21. 


22. 


23. 


24. 


25. 


假设 当 入 一 0 时 1 一 p(A) ~ 入-?L(A), 其 中 p > 0. 利用 13.5 节 例 (c) 来 证 明 , 当 
z 一 co 时 , 1- Fn"*s(z) ~nze -LI(GVE)MT(O). [ 斌 把 这 个 结论 和 8.8 节 例 (c) 加 以 比 
较 .] 

在 13.5 节 定 理 4 中 只 需 u(z) ~ v(z), 其中" 是 最 终 单调 的 . 

每 个 无 穷 可 分 分 布 都 是 复合 泊 松 分 布 的 极限 . 

如 果 在 无 穷 可 分 分 布 的 典型 表达 式 (7.2) 中 ， 当 z 一 oo 时 ，P(z) ~ zeL(z)， 其 中 
0<c<1, 证 明 , 1 一 F(z) ~ (c/1 -cz 1L(z). [在 17.4 节 例 (d) 中 继续 讨论 . ] 

设 已 是 一 个 无 穷 可 分 整 值 随机 变量 的 母 函数 , ” 是 一 个 概率 分 布 的 拉 普 拉 斯 变换 . 证 
明 : P(p) 是 无 穷 可 分 的 . 

无 穷 可 分 的 拉 普 拉 斯 变换 pn 收敛 于 一 个 概率 分 布 的 拉 普 拉 斯 变换 p,， 当 是 仅 当 典 型 
表达 式 (7.2) 中 的 相应 测度 P 收敛 于 已 . 因此 , 无 穷 可 分 分 布 序列 的 极限 本 身 也 是 
无 穷 可 分 的 . 

设 Fn 是 相应 于 混合 分 布 Un 的 诸 指数 分 布 的 混合 (7.1). 序列 {Fn} 收银 于 一 个 概率 
分 布 F, 当 和 且 仅 当 Un 收敛 于 一 个 概率 分 布 UV. 在 这 种 情形 下 , F 是 相应 于 U 的 混合 . 
密度 为 完全 单调 的 概率 分 布 是 无 穷 可 分 的 . 提示 : 利用 习题 11、 习题 21 和 13.7 节 例 
(1). 

几何 分 布 的 任 一 混合 都 是 无 穷 可 分 的 . 提示 : 仿照 13.7 节 例 ( 们 . 

具有 一 个 吸收 壁 的 扩散 ， 在 13.10 节 的 例 中 把 z 限制 于 > > 0, 并 且 当 z 一 js 和 0 时 
在 Vn 的 定义 中 令 wz 一 hh) = 0. 证 明 : 如 果 -多 是 所 有 满足 w(co) = 0,u(0) = 0 的 连 
续 函 数 所 构成 的 空间 , 那么 收敛 性 证 明 仍 有 效 , 但 如 果 把 最 后 一 个 条 件 去 掉 就 不 行 了 . 
结果 所 得 到 的 半 群 曾 在 10.5 节 例 (b) 中 给 出 过 . 

反射 壁 . 在 13.10 节 的 例 中 把 > 限制 于 z > 0, 并 且 当 z 一 h < 0 时 在 Vn 的 定义 中 
令 ulz -站 =wz+ 门 . 那么 对 于 每 一 个 一 、 二 、 三 阶 导数 都 有 界 且 满 足 w(0) = 

2 Vhu 都 收敛 . 这 个 边界 条 件 限制 了 的 定义 域 .22'. 结果 所 得 到 的 半 群 曾 在 10.5 节 
例 (e) 中 给 出 过 . 


,最 大 项 在 向 稳定 分 布 的 收效 中 的 影响 设 Xi,X2,… 是 独立 变量 , 具有 满足 (6.4) 的 


共同 分 布 已， 即 具 有 属于 稳定 分 布 G。 的 吸引 域 的 共同 分 布 F. 令 Sn = Xi 十 … 十 
Xns Mn = max[X1,.…, Xn]. 证 明 : 比 Sn/Mn 的 拉 普 拉 斯 变换 wn( 和 ) 收 化 于 


e-、 


w(A) = 一 -一 一 一 一 一 . 
1 +af (1— et)to -1dt 
0 


从 而 E(Ss/Ma) 一 1/(1 -0). 
提示 , 在 区 域 X; < Xi 上 计算 积分 , 我 们 得 到 
wn(N =ne-* 局 F{dz} ( J ein 


1 


@ 达 林 (D. A. Darling) 利 用 特征 函数 推导 了 这 个 结果 和 关于 指数 为 a > 0 的 稳定 分 布 的 类 似 结果 - 


见 Trans. Amer. Math. Soc., vol.73(1952)pp. 95-107. 
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代入 y= 二 , 然后 代入 = = ans, 其 中 an 满足 (6.5). 易 见 内 层 的 积分 为 


1 F(ans) a es 
-二 (3) 


0) 


其 中 W(A) 是 (*) 中 的 分 母 . 因此 


wa =e fe 0). 
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本 章 可 以 作为 第 13 章 的 课外 读物 . 它 包括 几 个 相互 独立 的 课题 这 些 课题 包 
括 一 些 实际 问题 (14.1 节 、 14.2 节 、 14.4 节 和 14.5 节 ) 以 及 14.7 节 的 一 般 存在 性 定 
理 . 14.3 节 的 极限 定理 说 明了 讨论 正则 变化 时 所 述 的 方法 的 威力 . 最 后 一 节 描 述 在 
讨论 马尔 可 夫 过 程 的 渐 近 性 质 和 首次 通过 时 间 时 需要 用 到 的 技巧 . 


14.1 更 新 方程 : 理论 


关于 概率 背景 , 读者 可 参考 6.6 节 和 6.7 节 . 虽然 第 11 章 致力 于 更 新 理论 , 但 
我 们 这 里 要 给 出 的 是 一 个 简单 的 独立 的 方法 ,把 这 里 的 方法 、 结 果 与 第 11 章 的 方 
法 、 结 果 进 行 比较 将 是 很 有 趣 的 . 给 出 拉 普 拉 斯 变换 的 基本 理论 后 , 现在 的 方法 更 
简单 更 直接 , 但 是 基本 更 新 定理 的 精确 结果 现在 还 无 法 用 拉 普 拉 斯 变换 得 到 . 另 一 
方面 , 利用 拉 普 拉 斯 变换 更 容易 导出 14.3 节 的 极限 定理 和 14.2 节 讨 论 的 那 种 类 型 
的 显 式 解 . 

现在 研究 的 对 象 是 积分 方程 


VD = Gt) + [ ve-nrtas), (1.1) 


其 中 下 和 G 是 给 定 的 单调 右 连续 函数 . 当 t < 0 时 ,它们 等 于 0. 我 们 把 它们 看 成 
是 测度 的 非 正 常 分 布 函 数 , 假设 F 不 集中 在 原点 上 , 且 它 们 的 拉 普 拉 斯 变换 


eQ= eXrta), 40)= Fee 0 


对 任意 的 和 > 0 是 存在 的 . 和 在 上 一 章 中 一 样 , 取 所 有 的 积分 区 间 为 闭 的 . 我 们 将 
证 明 恰好 存在 一 个 解 V， 它 是 一 个 非 正常 分 布 函 数 , 它 的 拉 普 拉 斯 变换 对 所 有 
的 入 > 0 都 存在 . 如 果 G 有 密度 9, 那么 V 的 密度 v 满足 通过 到 (1.1) 的 微分 得 到 
的 积分 方程 


vO =90+ { ve -or{ar}. (1.3) 


回忆 卷 积 法 则 , 我 们 得 到 , 对 于 分 布 V 的 拉 普 拉 斯 变换 (或 它 的 密度 的 普通 
拉 普 拉 斯 变换 ) 用 二 7+ Wp， 从 而 在 形式 上 有 


Ny 
YN = Tg 


(1.4) 
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为 了 证 明 这 个 形式 上 的 解 是 一 个 测度 (或 密度 ) 的 拉 普 拉 斯 变换 , 我 们 分 3 种 情形 
(其 中 只 有 前 两 种 情形 在 概率 上 是 重要 的 ) 进行 讨论 . 

情形 (a). F 是 一 个 不 集中 于 原点 上 的 概率 分 布 . 那么 p(0) = 1， 且 对 于 入 > 
0，92(A) <1. 因此 ， 


它 -二 
口 = 一 一 一 机 1.5 
5- 0 


对 入 > .0 收敛, 显然 , w 是 完全 单调 的 ， 从 而 是 一 个 测度 U 的 拉 普 拉 斯 变换 (13.4 
节 的 定理 1). 于 是 小 = w7 是 卷 积 V = U 女 G 的 拉 普 拉 斯 变换 , 即 


t 
vd = 人 Glt— z)U{dz} (1.6) 


的 拉 普 拉 斯 变换 . 最 后 , 如 果 G 有 密度 9, 那么 V 具有 密度 v = U 克 g. 于 是 我 们 证 
明了 上 述 积分 方程 的 解 的 存在 性 和 唯一 性 . 

13.4 节 的 陶 伯 定理 2 描述 了 V 在 无 穷 远 处 的 渐 近 性 质 . 考虑 G(co) <oo 且 下 
有 有 限期 望 4 这 样 一 个 典型 情形 . 在 原点 附近 V(A) ~ Ar-1G(co)X-1， 此 式 蕴 含 


V(t) ~ plG(00) :t,t— 00. (1.7) 
利用 11.1 节 中 的 更 新 定理 可 得 到 更 精确 的 结果 ， 
V(t+h) -V(t) = p71G(o0)h, 


但 这 无 法 由 陶 伯 定理 导出 . [ 当 FF 的 期 望 不 存在 时 , 陶 伯 定理 可 导出 更 好 的 结果 ( 见 
14.3 节 )j] 

情形 (b) . 是 一 个 亏损 分 布 , F(oo) < 1. 为 简单 起 见 , 也 假设 G(o0) < oo. 上 
面 的 论证 仍然 有 效 ， 只 不 过 是 现在 p(0) = F(oo) < 1, 从 而 w(0) < co: 测度 VV 是 
有 界 的 . 

情形 (c). 最 后 一 种 情形 是 F(o0) > 1. 对 于 入 的 较 小 的 值 ，(1.4) 中 的 分 母 是 负 
的 ; 对 于 这 样 的 值 , w(A) 不 可 能 是 一 个 拉 普 拉 斯 变换 . 幸好 这 个 事实 并 不 引起 麻烦 . 
为 了 避免 微不足道 的 情形 , 假设 下 在 原点 上 没有 原子 , 从 而 当 入 -> co 时 p(X) 一 0. 
在 这 种 情形 下 , 方程 p(k) = 1 存在 唯一 的 一 个 根 > 0. 情形 (a) 下 的 论证 对 入 > 大 
仍然 适用 . 换 句 话说 , 存在 唯一 的 一 个 解 V, 但 是 它 的 拉 普 拉 斯 变换 w 仅 对 入 > 大 
收敛 . 对 于 这 样 的 值 , w 仍 由 (1.4) 给 出 .9 

@ 解 V 具有 形式 V{dz} = ekzV#fdz}, 其 中 V# 是 把 标准 更 新 方程 (1.1) 中 的 换 为 正 党 分布 


函数 FP#{dz} = et Ffdzj,G 换 为 G#{dz} = eG{dz} 后 得 到 的 方程 的 解 [其 拉 普 拉 斯 变 
换 为 y#(A) 二 (A 二 有] 
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14.2 更 新 型 方程 : 例 


例 (a) 泊 松 过 程 中 间隔 的 等 待 时 间 . 设 V 是 在 一 个 参数 为 c 的 泊 松 过 程 中 ( 即 
在 具有 指数 到 达 时 刻 间 隔 的 更 新 过 程 中 ) 到 第 一 个 长 度 为 上 的 间隔 结束 时 的 等 待 时 
间 的 分 布 . 在 11.7 节 例 (b) 中 曾 用 分 析 方法 讨论 过 这 个 问题 . 在 6.7 节 中 曾 给 出 过 
它 的 经 验 解释 (试图 穿 过 交通 流 的 行人 或 汽车 的 延迟 , II 型 盖 格 计 数 器 的 关闭 时 间 
等 ). 我 们 着 手 重 新 建立 更 新 方程 . 
从 时 刻 0 开始 的 等 待 时 间 必 然 大 于 上， 如果 在 时 刻 前 不 出 现 到 达 (概率 为 
e <), 或 者 如 果 第 一 次 到 达 出 现在 时 刻 z < £, 并 且 剩 余 等 待 时 间 < t 一 z, 那么 上 
述 的 等 待 时 间 在 t > € 前 终止 . 由 于 缺乏 记忆 性 , 所 以 对 于 t > &, 等 待 时 间 < 的 
概率 V(t) 为 < 
V( =e- 抢 +/ V(t— 2):e “edz, (2.1) 
对 于 上 < 6VY( = 0. 尽管 它 的 外 表 比 较 陌生 , 但 是 (2.1) 仍 是 一 个 标准 型 (1.1) 的 


更 新 方程 , 其 中 下 的 密度 f(z) = ce 集中 于 0 < z <5 上 , 而 G 集中 于 点 5 上 . 
于 是 


2P(A) 一 5 zx —e (te), 7N) =eretA6， (2.2) 
因此 Y 的 拉 普 拉 斯 变换 为 
一 (c+A)E 
yA = ee (2.3) 


11.7 节 (7.8) 期 望 与 方差 的 表达 式 可 由 上 式 通过 简单 的 微分 9 得到， 对 高 阶 矩 
也 是 如 此 . 
从 (2.3) 导出 解 的 一 个 明显 公式 是 很 有 启发 性 的 . 由 于 明显 的 理由 ， 我 们 转 过 
来 讨论 分 布 的 尾部 1 -V(t). 它 的 普通 拉 普 拉 斯 变换 是 [1 一 (和 )]/ 和 A[ 见 13.2 节 (2.7)]， 
此 变换 有 一 个 几何 级 数 展开 式 
1— wy(X 1 一 e-C+NE1” 
0 ) = 1en— | Ce } . (2.4) 
括号 内 的 表达 式 与 均匀 分 布 的 拉 普 拉 斯 变换 (1 -e-^)/ 和 的 不 同 之 处 , 仅 在 于 一 个 
尺度 因子 & 以 及 把 和 换 成 了 入 + c. 正如 我 们 一 再 说 明 的 那样 ,这 个 变化 是 由 于 用 
ee 乘 以 密度 而 引起 的 . 于 是 


1 一 TY 他 = Do At/ (2.5) 


n=1 


@ 省 略 分 母 显 然 是 为 了 避免 宛 长 的 分 式微 分 . 
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其 中 f" 是 均匀 分 布 与 其 本 身 的 n 重 卷 积 . 利用 1.9 节 (9.6), 我 们 最 后 得 到 
Lin (ct NT EN 
1-V() =e Fm- 1) 的 人 二 ) N (2.6) 


与 覆盖 定理 的 关系 是 有 趣 的 . 在 1.9 节 (9.9) 中 曾 证 明 , 内 层 的 和 表示 (对 于 固 
定 的 6) 在 0,t 中 随机 选取 n 一 1 个 点 , 把 此 区 间 分 为 n 个 长 度 < 的 部 分 的 概率 . 于 
是 为 使 等 待 时 间 超 过 t, 当 且 仅 当 0,t 的 每 个 子 区 间 至 少 包含 一 个 到 达 ， 从 而 (2.6) 
说 明 , 如 果 在 泊 松 过 程 中 恰 有 n 一 1 个 到 达 发 生 在 0,t 中 , 那么 它们 的 条 件 分 布 是 
均匀 的 . 如 果 从 这 个 事实 开始 , 那么 我 们 可 以 把 (2.6) 作为 覆盖 定理 的 推论 换 句 话 
说 , (2.6) 表示 利用 随机 化 得 到 的 覆盖 定理 的 一 个 新 证 明 . 

例 (b) 复合 泊 松 过 程 中 的 破产 问题 . 作为 第 2 个 说 明 性 例子 , 我 们 来 讨论 积 微分 
方程 


A, 
RW = (e/a —(o/9 /Re-aPtaah (27) 


其 中 下 为 一 个 期 望 为 4 < co 的 概率 分 布 . 这 个 方程 是 在 6.5 节 中 导出 的 , 在 那里 
讨论 了 它 与 集体 风险 理论 、 存储 问题 等 等 的 关系 . 在 例 11.7 节 例 (a) 中 用 不 同方 法 
推导 了 它 的 解 和 渐 近 性 质 . 

问题 是 寻求 一 个 满足 (2.7) 的 概率 分 布 玉 .这 个 方程 与 更 新 方程 有 关 ， 可 以 用 
相同 的 方法 进行 讨论 . 取 普 通 拉 普 拉 斯 变换 并 注意 到 


p(N) = 人 eR(z)dz = MA! [ H eR(z)dz + M1R(O). (2.8) 
0 0 
我 们 可 得 
R(0) 1 
PM (2.9) 
和 s I 二 2(M) 入 


入 
其 中 是 下 的 拉 普 拉 斯 变换 注意 到 [1 一 yp( 和 )]/ 和 是 1- F(z) 的 普通 拉 普 拉 斯 变 
换 , 我 们 就 可 看 出 右边 第 一 个 分 式 具有 (1.4) 的 形式 ,从 而 是 一 个 测度 如 的 拉 普 拉 
斯 -斯 蒂 尔 切 斯 变换 . 因子 1/ 和 表示 一 个 积分 , 从 而 p() 是 非 正 常 分 布 函 数 R(z) 
的 普通 拉 普 拉 斯 变换 [正如 (2.8) 所 指出 的 那样 ]. 因为 当 z 一 co 时 R(x) 一 1, 所 以 
由 13.5 节 中 的 定理 4 推出 , 当 入 一 0 时 , p(A) 一 1. 因此 , 我 们 从 (2.9) 可 得 , 对 于 
未 知 常数 R(0)， 

R(0) = 1— (a/o)p, (2.10) 
于 是 我 们 的 问题 当 ap < c 时 有 唯一 的 一 个 解 ， 当 an > c 时 没有 解 . 这 个 结果 可 由 概 
率 背 景 预料 到 . 


418 第 14 章 拉 普 拉 斯 变换 的 应 用 


公式 (2.9) 也 出 现在 排队 论 中 , 名 为 辛 钦 - 波 拉 杰 克 公式 [ 见 12.5 节 例 (a)]. 许多 论文 
推导 出 了 特殊 情形 下 的 明显 表达 式 ,在 纯 泊 松 过 程 中 . 焉 集中 于 点 1 上 , (MX) = e 、. p 的 
表达 式 几乎 和 (2.3) 相同 ,同样 的 方法 容易 导致 显 式 解 


a 0) ea 
k=0 


c 


显然 ,这 个 公式 没有 实用 价值 , 但 是 由 于 存在 必须 用 奇特 的 方式 消 掉 的 正 指数 ,这 个 公式 
是 很 有 趣 的 . 早 在 1934 年 就 出 现在 集体 风险 ?理论 中 , 但 是 后 来 反复 地 被 重新 发 现 . 


14.3 ”包含 反正 弦 分 布 的 极限 定理 
通常 把 集中 在 DT 上 且 密 度 为 


Toll -zc-1，0<a<1 (3.1) 


ga(z) = 


的 分 布 称 为 “广义 反正 玉 分 布 ”， 虽然 它们 是 特殊 的 6 分 布 .a = 于 的 特殊 情形 对 
应 于 分 布 函数 2r-:arcsin Vz, 这 个 函数 在 随机 游 动 的 起 伏 理论 中 起 了 重要 的 作用 . 
研究 与 q 有 关 的 极限 分 布 的 论文 越 来 越 多 ,它们 的 复杂 计算 使 qu 的 出 现 看 上 去 
非常 神秘 . 深刻 的 理由 在 于 ge 与 具有 正则 变化 尾部 的 分 布 函 数 有 密切 关系 , 即 与 
具有 形式 

1- F(z)=2-°L(z), 0<a<l (3.2) 


的 分 布 有 密切 关系 , 其 中 当 t 一 co 时 L(tz)/L(z) 一 1. 对 于 这 样 的 函数 , 可 以 把 更 
新 定理 加 以 补充 , 也 就 是 说 , 更 新 函数 U = 2F"* 满足 


1 
~ TU-arG+a) Ze)’ 


换 句 话说 , 如 果 已 是 正则 变化 的 , 那么 UV 也 是 如 此 . 已 经 知道 (但 不 是 显然 的 )(3.3) 
中 的 常数 等 于 (sin ra)/ra, 从 而 (3.3) 可 以 改写 成 如 下 形式 : 


U(t) t 一 oo. (3.3) 


[L- Far(e) 一 畦 于 2 4 00. (3.4) 


引 理 ”如 果 已 具有 (3.2) 的 形式 ,那么 (3.4) 成 立 . 
证 根据 13.5 节 的 陶 伯 定理 4， 


@® R. Pyke,The supremum and infimum of the Poisson process, Ann. Math.Statist., vol. 30 
(1959) pp.568-576 给 出 了 在 时 刻 t 前 破产 的 显 式 解 - 
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1— oO) ~T( aL(1/AN), A—0. 
UU 的 拉 普 拉 斯 变换 是 Bo" = 1/(1 一 p), 由 13.5 节 的 定理 2, (3.3) 成 立 . p> 
现在 考虑 具有 共同 分 布 F 的 正 值 独立 变量 Xi 的 序列 以 及 它们 的 部 分 和 5% = 
下 十 … 十 Xn. 对 于 固定 的 t+> 0, 用 和 表示 使 
SN: St < SNe+1 (3.5) 


的 随机 指标 . 我 们 对 两 个 子 区 间 

Y=t—SN, 和 Z=Sm+1—t 
感 兴趣 . 它们 在 6.7 节 中 曾 作 为 时 刻 t 时 “已 度 过 的 等 待 时 间 ” 和 “剩余 的 等 待 时 
间 ” 引 入 过 . 我 们 已 经 从 许多 方面 说 明了 这 些 变量 的 重要 性 . 在 11.4 节 中 证 明了 ， 
为 使 当 上 一 oo 时 变量 Ye 和 有 具有 共同 的 正常 极限 分 布 ， 当 且 仅 当 玉 有 有 限期 
望 . 但 是 在 其 他 情形 下 ,对 于 每 个 固定 的 z > 0,P{Y < z} 一 0 对 有 也 有 类 似 的 
结论 . 下 列 有 趣 的 定理 作为 我 们 的 结果 的 副产品 出 现 , 但 是 原来 的 证 明 却 是 相当 复 
杂 的 .2 
定理 。 如果 (3.2) 成 立 ， 那 么 正规 化 了 的 变量 Ye/t 的 极限 密度 qa 由 (3.1) 给 出 ,并 且 
Zi/t 的 极限 密度 为 @ 


_ sin ra 
x za(l+z) 


已 ,Zz>0. (3.6) 


证 为 使 不 等 式 tr1 < Yi < tz2 成立 , 当 且 仅 当 Sn = ty 且 对 于 使 1-z2 <y < 1-z1 
的 某 个 组 合 n,y， 

Xn+1 > t(1 一切. 
对 所 有 的 n 以 及 所 有 可 能 的 vy 求 和 , 我 们 得 到 


P{tz1 < Yi <tr2} = / 2 IFdG -ttdy， (3.7) 


从 而 利用 (3.4) 得 


sinra /1™1— F(t1—y)) Uf{tdy} 
Pftzl < Y < tz} ~ Es jo iD TO ， (3.8) 
于 是 V(ty)/U(t) 一 y*， 从 而 测度 U{tdy}/U(t) 趋 于 密度 为 aye-: 的 测度 ,而 第 一 
个 因子 趋 近 于 (1 一 y)-*. 由 单调 性 , 这 种 逼近 是 一 致 的 , 因此 
@ E. B.Dynkin, Some limit theorems for sums of independent random variable with infinite 
mathematical ezpectations. 见 Selected Trans. in Math. Statist. and Probability, vol. 
1(1961)IMS-AMS, pp.171-189. 


@@ 因为 SN,+1 = Ge 十 由 所 以 Zt/SN4,+1 的 分 布 可 由 (3.6) 利用 变换 莹 换 z = y/(1 一 y) 而 得 到 . 
由 此 可 见 和 /Sws+1 也 有 极限 密度 ga. 
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Pf{izi <¥ < tr2} 一 ee a 1(1 —y)-°ay, (3.9) 

这 就 证 明了 第 一 个 断言 , 对 于 P{2: > ts}, 我 们 在 极限 0 和 1/(1 + s) 六 各 机 
一 积分 , 通过 微分 就 可 得 到 (3.6). 

一 个 值得 注意 的 事实 是 , 密度 go 在 端点 0 和 1 附近 变 为 无 穷 . 因此 , Yi/t 的 
最 可 能 的 值 位 于 0 和 1 附近 . 

把 我 们 的 论证 作 简 单 修改 就 可 得 到 这 个 引 理 和 定理 之 逆 . 那 时 就 可 看 出 (3.2) 
是 Yt 的 极限 分 布 存在 的 必要 条 件 . 另 一 方面 ，(3.2) 刻 划 了 稳定 分 布 的 吸引 域 的 
”特征 , 这 就 说 明了 为 什么 ga 在 与 这 样 的 分 布 有 关 的 问题 中 经 常 出 现 


14.4 ” 忙 期 与 有 关 的 分 支 过 程 


在 13.4 节 例 (a) 中 曾 证 明 , 如 果 2 是 一 个 期 望 为 p 的 概率 分 布 下 的 拉 普 拉 斯 

变换 , 那么 方程 

BOA)=w(A+c—cBN), A>0 (4.1) 
有 唯一 的 解 8, 而 且 6 是 一 个 分 布 昌 的 拉 普 拉 斯 变换 、 此 分 布 当 cj < 1 时 是 正常 分 
布 , 否则 是 亏损 分 布 . 这 个 简单 的 优美 的 理论 越 来 越 经 常 地 被 利用 , 因此 说 明 (4.1) 
的 概率 背景 及 其 应 用 是 值得 的 . 

如 果 我 们 习惯 于 直接 利用 拉 普 拉 斯 变换 来 表示 概率 关系 式 , 那么 (4.1) 和 类 似 
方程 的 推导 是 很 简单 的 . 一 个 典型 的 情况 如 下 , 考虑 一 个 随机 和 SN = XI 十.… 十 XN， 
其 中 X; 是 拉 普 拉 斯 变换 为 Y(A) 的 独立 变量 , N 是 一 个 母 函数 为 P(s) 的 独立 变量 . 
SN 的 拉 普 拉 斯 变换 显然 是 P(Y( 和 A)) [ 见 13.3 节 例 (o)]. 对 于 一 个 泊 松 变量 N, 这 个 
拉 普 拉 斯 变换 具有 e-“-?( 的 形式 . 正如 我 们 一 再 看 到 的 那样 . 在 应 用 中 常 取 参 
数 a 为 一 个 服从 分 布 U 的 随机 变量 . 如 果 采 用 分 布 函数 的 术语 ， 那 么 我 们 可 以 说 
e “OA 是 在 给 定 参 数值 a 下 Sy 的 条 件 拉 普 拉 斯 变换 . 绝对 的 拉 普 拉 斯 变换 可 
通过 对 U 的 积分 得 到 . 由 被 积 函数 的 特殊 形式 可 知 , 结果 显然 是 w(1 一 (和)), 其 中 
ww 表示 U 的 拉 普 拉 斯 变换 . 

例 (a) ” 忙 期 .? 顾 客 (或 呼叫 ) 按照 一 个 参数 为 c 的 泊 松 过 程 到 达 一 个 服务 员 (或 
中 转 线 ) 那里 . 假设 逐次 的 服务 时 间 是 具有 共同 分 布 F 的 独立 变量 , 假设 有 一 个 顾 
”。@ 花期 由 (4.1) 决定 是 肯 达 尔 (D. G. Kendall ) 在 Some problems in the theory of queues, J. Roy. 
Statist，Soc.(B), vol, 13 (1951) pp. 151-185 一 文中 指出 的 . 把 它 化 为 分 支 过 程 的 优美 的 推导 是 
由 古 德 (I J. Good) 给 出 的 . 方程 (4.1) 等 价 于 
B= 人 Brx(tt 一 zjPtda， 
它 常 称 为 载 什 克 (Takacs) 积分 方程. 这 个 理论 的 内 在 的 简单 性 并 不 总 是 不 言 自明 的 . 
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客 在 时 刻 0 到 达 , 并 且 服 务 员 是 空闲 的 . 他 的 服务 时 间 立 即 开始 . 在 他 的 服务 时 间 
期 间 到 达 的 顾客 排 成 一 队 ， 只 要 还 有 人 在 排队 , 服务 时 间 就 不 间断 地 继续 下 去 . 所 
谓 忙 期 指 的 是 从 0 到 服务 员 又 得 空闲 的 第 一 个 时 刻 的 时 间 间 隔 . 它 的 持续 时 间 是 
一 个 随机 变量 ,我 们 分 别 用 B 和 6 表示 它 的 分 布 和 拉 普 拉 斯 变换 . 

利用 分 支 过 程 的 术语 ,使 繁忙 期 开始 的 顾客 是 “祖先 ”在 他 的 服务 时 间 内 到 
达 的 顾客 是 他 的 直系 后 裔 ， 等 等 . 假定 祖先 在 时 刻 > 离 去 ， 他 的 直系 后 毅 的 个 数 
NN 是 一 个 期 望 为 cz 的 泊 松 变量 . 用 Xi 表示 第 j 个 直系 后 育 及 其 所 有 后 彰 的 总 
的 服务 时 间 . 虽然 这 些 服务 时 间 不 一 定 是 连续 的 , 但 是 它们 的 总 的 持续 时 间 和 人 忙 
期 显然 有 相同 的 分 布 . 因此 ,所 有 (直系 和 非 直系 ) 后 裔 所 需要 的 总 的 服务 时 间 是 
SN = X 十 … 二 XN,， 其 中 的 拉 普 拉 斯 变换 为 8 且 所 有 的 变量 是 独立 的 . 对 于 忙 
期 , 我 们 要 加 上 祖先 本 身 的 服务 时 间 z. 因此 , 给 定 了 祖先 的 服务 时 间 的 长 度 , 忙 
期 z+ Sw 的 (条 件 ) 拉 普 拉 斯 变换 就 是 e-*P+e-“pC1. 参数 z 的 分 布 为 ,关于 
积分 就 得 出 (4.1). 

如 果 B 是 亏损 的 , 那么 亏 基 1 - B(co) 表示 有 一 个 永 不 结束 的 忙 期 (拥挤 ) 的 
概率 . 条 件 cy < 1 表示 单位 时 间 内 到 达 的 顾客 的 平均 总 服务 时 间 一 定 不 大 于 1. 容 
易 从 (4.1) 计算 出 B 的 期 望 与 方差 . 


在 指数 服务 时 间 的 特殊 情形 下 ,F(t) = 1 一 e-%,yp(A) = a/( 和 十 a). 在 这 种 情 
形 下 , (4.1) 化 成 一 个 二 次 方程 , 它 的 一 个 根 在 无 穷 远 处 是 无 界 的 . 因此 , B 和 另 一 
根 一 致 , 即 
a | 入 +a+e 入 +a+eN2 
so- 嵌 | 汪 — ( 妾 车 -| (4.2) 


这 个 拉 普 拉 斯 变换 曾 出 现在 13.3 节 例 (c) 中 . 考虑 到 改变 了 的 尺度 参数 和 平移 原 
理 , 我 们 可 看 出 对 应 的 密度 为 


Vay/ece-(e+ozz-lmn(2Vac z). (4.3) 


在 14.6 节 例 (b) 中 将 用 另 一 方法 导出 同一 结果 , 它 曾 被 应 用 于 6.9 节 例 (e) 中 . 

例 (b) ”交通 中 的 延迟 .@ 假设 通过 公路 给 定点 的 汽车 符合 一 个 参数 为 c 的 泊 松 过 
程 . 设 交通 停止 一 段 长 度 为 5 的 时 间 (由 于 红 灯 或 其 他 原因 ). 当 交 通 重新 开始 时 , KK 
辆 汽车 将 排队 等 待 , 其 中 K 是 一 参数 为 c6 的 泊 松 变量 . 由 于 队 中 第 ” 辆 汽车 不 能 
先 于 它 前 面 的 + 一 1 辆 开动 , 所 以 队 中 每 辆 汽车 对 跟 在 它 后 面 的 所 有 汽车 都 引起 一 
个 延迟 . 自然 假设 这 些 延 迟 是 具有 共同 分 布 的 独立 随机 变量 . 在 一 个 队列 的 持续 


@ 本 例 是 在 李 特 尔 (J. D. C. Little) 在 关于 被 延迟 了 的 汽车 的 数量 的 讨论 的 启发 下 给 出 的 . [Opera- 
tions. Res., vol. 9(1961)pp. 39-52.] 
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时 间 内 , 新 到 达 的 汽车 被 迫 加 入 这 个 队列 ， 因 此 增加 总 的 延迟 . 这 种 情况 和 上 例 一 
样 , 只 是 这 里 有 K 个 “祖先 ”. 由 每 辆 汽车 、 它 的 直系 和 非 直系 后 裔 所 引起 的 总 的 
延迟 的 拉 普 拉 斯 变换 满足 (4.1)， 总 的 “ 忙 期 ”( 从 交通 重新 开始 到 不 再 有 汽车 等 待 
的 第 一 个 时 刻 止 的 时 间 间 隔 ) 的 拉 普 拉 斯 变换 为 


ene B*(X) = eos BO 


容易 计算 出 平均 延迟 ,我 们 可 以 利用 这 个 结果 来 讨论 逐次 的 交通 管理 色 灯 的 影响 
等 问题 (见习 题 6 和 习题 7). > 


14.5 扩散 过 程 


在 一 维 布朗 运动 中 转移 概率 是 正 态 的 ， 首 次 通过 时 间 的 分 布 是 指数 为 1/2 的 
稳定 分 布 [ 见 6.2 节 例 (ej]. 由 于 有 这 些 明 显 的 公式 , 所 以 我 们 不 应 希望 通过 拉 普 拉 
斯 变换 来 得 到 新 的 信息 . 重新 从 扩散 方程 开始 的 原因 是 这 种 方法 是 有 益 的 , 并且 可 
应 用 于 最 一 般 的 扩散 方程 中 (除了 在 系数 为 任意 时 , 不 能 指望 得 到 显 式 解 以 外 ). 为 
了 简化 书写 , 我 们 承认 转移 概率 Q: 具有 密度 q 这 件 事 (虽然 在 没有 特殊 假设 时 也 
可 利用 即将 叙述 的 方法 得 到 这 个 结果 ). 

我 们 从 布朗 运动 这 一 特殊 情形 开始 . 对 于 一 个 给 定 的 有 界 连续 函数 f, 令 


wo) = /aera (5.1) 


我 们 的 出 发 点 是 10.4 节 例 (a) 中 导出 的 事实 , 即 (至 少 对 于 充分 光滑 的 f)u 满足 扩 
散 方 程 
Oult, 7) _ 1 02ult, 7) 
Bt 2 6r2 
和 初始 条 件 : 当 t 一 0 时 , ult,z) 一 f(z). 利用 普通 拉 普 拉 斯 变换 


(5.2) 


wx(z) = / eMult, z)dz, (5.3) 
0 
我 们 由 (5.2) 可 得 @ 
Xa 一 3 以 = 玫 (5.4) 
由 (5.1) 可 得 
wo = Kate,s)fl8)ds, (5.5) 


@ 读 过 有 关 半 群 的 那儿 节 的 读者 将 会 注意 到 ,我们 讨论 的 是 微分 算 子 红 = d?/dz? 产生 的 马尔 可 
夫 半 群 . 微分 方程 (5.4) 是 在 希 尔 - 吉田 定理 中 出 现 的 13.10 节 (10.1) 基本 方程 的 特殊 情形 . 
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其 中 Ks(z,g) 是 qe(z,y) 的 普通 拉 普 拉 斯 变换 . 在 微分 方程 中 ,Ks 称 为 (5.4) 的 格 
林 (Green) 函数 . 我 们 来 证 明 


1 
Ka(z,y) = A " (5.6) 


这 个 公式 的 正确 性 可 以 通过 验证 (5.5) 表示 微分 方程 (5.4) 的 所 要 求 的 解 来 证 明 , 但 
是 这 并 不 能 说 明 这 个 公式 是 怎样 得 到 的 . 

我 们 提议 用 概率 论证 来 推导 (5.6), 这 种 论证 可 应 用 于 更 一 般 的 方程 并 导致 基 
本 首次 通过 时 间 的 明显 表达 式 (习题 9). 我 们 假设 已 知 轨道 变量 X(t) 连续 地 依赖 
于 二 设 X(0) = z, 用 Fltz,3) 表示 在 时 刻 上 以 前 到 达 点 y 的 概率 . 我 们 称 下 是 从 
Zz 到 y 的 首次 通过 时 麟 的 分 布 , 并 用 pa(z,y) 表示 它 的 拉 普 拉 斯 变换 . 

对 于 z <y <z, 为 使 事件 X(t) = z 发 生 , 当 且 仅 当 首 次 通过 y 发 生 在 某 个 时 
刻 r < 由 然后 在 时 间 t 一 7 内 从 y 转移 到 z. 于 是 qi(z,z) 是 下 (tz,y) 和 qe(y,z) 的 
卷 积 , 从 而 

Ka(z,z) = pA(Z,YIKA(Y, 2),T <Y < 2. (5.7) 


固定 点 y 并 取 f 为 一 个 集中 于 矿 55 上 的 函数 , 用 f(z) 乘 (5.7), 并 关于 z 取 积分 . 
由 (5.5) 看 出 ,结果 是 


wA(Z) = pa(z VW, > 纪 (5.8) 
而 (5.4) 要 求 对 于 固定 的 y, pxA(z,3) 满足 微分 方程 
2， 
和 二 3 =0, wa (5.9) 


在 -co 上 有 界 的 解 一 定 具有 Cxe-Y5xz 的 形式 .因为 (5.8) 说 明 ， 当 z 一 y 时 ， 
Ya(zy) 一 1 所 以 当 z <2 时 我 们 有 pa(z,y) = evF(e-). 当 z >y 时 可 以 利用 类 
似 的 论证 , 显然 , 由 对 称 性 , 从 = 到 的 首次 通过 时 间 的 拉 普 拉 斯 变换 为 


PasY) = eVE le, (5.10) 
因此 在 (5.7) 中 令 z = y, 我们 可 看 出 
(一 eV MK 


因为 K 必须 对 称 地 依赖 于 z 和 vy, 所 以 K(y,y) 是 一 个 只 依赖 于 入 的 常数 CA. 于 是 
除了 一 个 乘积 常数 C、 外 , 我 们 已 经 确定 了 K、, 容易 由 下 列 事实 推出 V2XC、 = 1: 
对 于 /= 1 有 相应 的 解 wa(z) = 1/ 和 . 这 就 说 明了 (5.6) 的 正确 性 . 
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下 例 说 明 怎样 计算 在 到 达 另 一 点 如 < z 之 前 到 达 点 y > z 的 概率 . 同时 它们 
说 明 怎样 处 理 边界 条 件 . 
例 (a) ”一 个 吸收 壁 . 当 一 个 满足 X(0) = z > 0 的 普通 布朗 运动 到 达 原 点 时 令 它 停 
止 , 我 们 就 得 到 了 0,00 上 的 在 原点 上 有 一 个 吸收 壁 的 布朗 运动 . 我 们 用 gq?e*(z,y) 
表示 它 的 转移 密度 ,并 类 似 地 采用 其 他 记号 . 

在 无 约束 的 布朗 运动 中 ,一 个 从 x > 0 到 y > 0( 中 间 通 过 0) 的 转移 的 概 
率 密度 是 从 z 到 0 的 首次 通过 密度 和 ge(0,y) 的 卷 积 ， 对 应 的 拉 普 拉 斯 变换 是 
JPA(z,0)KAX(0,y)， 从 而 我 们 一 定 有 


Ks(z,y) = Ka(z,y) — pa(z, 0) Ka(O,y), (5.11) 
其 中 zx > 0，y > 0. 这 等 价 于 
Kbs(z,g) = le— VDI- — -V+W)] /V2X (5.12) 
或 者 
Ge (zy) = qe(2,y) — qe(z, —Y), (5.13) 


这 和 用 反射 原理 得 到 的 10.5 节 (5.5) 解 一 致 . 
导致 (5.7) 的 论证 也 适用 于 吸收 壁 过 程 , 我 们 从 (5.12) 可 得 , 对 于 0 < z <y， 
2 ev5Xzr _e-v3Xz 
加 pA"(T,Y) = aVR (5.14) 


这 @ 是 在 满足 X(0) = z 的 无 约束 布朗 运动 中 在 时 刻 ! 之 前 且 在 通过 原点 之 前 到 达 
点 8 > z 的 概率 的 拉 普 拉 斯 变换 . 令 入 一 0, 可 得 在 通过 原点 之 前 到 达 gy 的 概率 等 于 
z/y, 这 与 在 对 称 伯 努 利 随机 游 动 的 情形 一 样 ( 见 第 1 卷 14.2 节 中 的 破产 问题 )，( 在 
习题 8 中 继续 讨论 . ) 
例 (b) ”两 个 吸收 壁 . 现在 考虑 一 个 从 I 中 的 点 z 出 发 而 在 到 达 0 或 1 时 终止 的 
布朗 运动 . 通过 在 上 述 吸收 璧 过 程 中 引入 一 个 位 于 1 点 的 附加 的 吸收 壁 来 推导 本 例 
的 过 程 最 容易 , 因而 导致 (5.11) 的 论证 仍然 有 效 . 因此 , 新 过 程 的 转移 密度 gq#(z,y) 
的 拉 普 拉 斯 变换 为 

K¥ (2,y) = KP(z,y) — pas(z, 1) KX (1,y), (5.15) 


其 中 z 和 y 局 限于 古 I. [注意 , 边界 条 件 K#(0,y) = K##(1,y) 是 满足 的 . ] 简单 的 
算术 运算 表明 ， 


K#(z,y) = 


@—V2Slz-yl + e-V2X(2-|z—yl) _— e—V2X(z+y) — e—V2X(2-2—y) 
V2A(1 — e-2v2%) 


@ 对 于 固定 的 y, pb* 表示 微分 方程 (5.9) 的 解 , 此 解 当 z = 0 时 化 成 0, 当 z 二 y 时 化 成 1. 在 这 
种 形式 下 , 结果 适用 于 三 点 组 a < z < 5b 和 a > z > 及 更 一 般 的 微分 方程 . 


(5.16) 
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把 1/[1 一 e-2Y] 展 成 几何 级 数 , 我 们 得 到 另 一 种 表达 式 


K¥#(z,y) = 遍 3 [ev 本 -yanl oe-Vletyt2nl], (617) 

这 等 价 于 由 反射 原理 得 到 的 10.5 节 (5.7) 解 . 
同样 的 论证 适用 于 有 限 或 无 限 区 间 上 的 更 一 般 的 扩散 方程 

bh 号 三 dao) eu Se ba) ED, a>0. (5.18) 


代替 (5.4), 我 们 得 到 . 

Mwa— Pst -b= (5.19) 
解 也 具有 (5.5) 的 形式 ,其 中 Ka 是 一 个 形 如 (5.7) 的 格林 函数 [在 (5.7) 中 pa(z,9) 
是 从 z 到 y > z 的 首次 通过 密度 的 变换 ]. 对 固定 的 y, 此 函数 一 定 满足 对 应 于 (5.9) 
的 微分 方程 , 即 

XpA 一 5 一 bp 一 0. (5.20) 
它 在 左 端点 一 定 是 有 界 的 , 且 pa(y,y) = 1. 除了 (5.20) 有 一 有 界 解 的 情形 外 , 这 些 


条 件 唯一 地 确定 了 p, 在 (5.20) 有 一 有 界 解 的 情形 (和 上 例 一 样 ) 必须 加 上 适当 的 
边界 条 件 . 
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在 本 节 中 , 我 们 将 研究 第 1 卷 18.5 节 中 的 生 灭 过 程 和 2.7 节 中 的 随机 化 了 的 
随机 游 动 之 间 的 关系 .主要 的 目的 是 要 举例 说 明 涉及 到 拉 普 拉 斯 变换 的 技巧 以 及 
边界 条 件 的 正确 利用 . 

考虑 一 个 从 原点 出 发 的 简单 随机 游 动 , 其 中 每 一 步 等 于 +1 和 -1 的 概率 分 别 
是 p 和 gq. 假设 相 邻 的 各 步 之 间 的 时 间 是 服从 期 望 为 1/c 的 指数 分 布 的 独立 随机 变 
量 . 在 时 刻 上 位 于 位 置 n 的 概率 P(t) 曾 在 2.7 节 (7.7) 中 求 出 过 , 但 是 我 们 从 新 的 
角度 出 发 重新 开始 . 为 了 导出 Pn(t) 的 方程 ,我 们 作 如 下 讨论 . 只 有 当 在 时 刻 t 之 
前 发 生 跳 聊 时 , 才 可 能 在 时 刻 t+ 位 于 n 取 0. 假设 首次 跳跃 在 时 刻 t 一 z 发 生 且 到 达 
1, 在 时 刻 t 位 于 位 置 n 的 (条 件 ) 概率 是 P_1(z). 因此 , 对 于 n= 土 1, 土 2,…， 


P(t)= [/ ; ce “(tT#)[pPn_1(7) + gPn+1(T)]dz. (6.18) 
对 于 n=0, 必须 加 一 项 e-“, 以 表示 直到 时 刻 t 没 有 发 生 跳跃 的 可 能 性 . 于 是 


nag=e“+ 人 areerapP ia)+gPalar (6.1b) 
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因此 ，P。 必须 满足 无 穷 的 卷 积 方程 组 (6.1). 利用 简单 的 微分 可 导致 无 穷 微分 

方程 2 
P(t) = —cPn(t) + cpPn-1(t) + caPni(t) (6.2) 

和 初始 条 件 PR(0) = 1, 对 于 nz0, Pn(0) = 0. 

方程 组 (6.1) 和 (6.2) 是 等 价 的 , 但 是 后 者 有 一 个 形式 上 的 优点 , 即 n= 0 的 特 
殊 作用 只 有 在 初始 条 件 中 才能 看 出 来 . 对 于 拉 普 拉 斯 变换 的 应 用 来 说 , 我 们 从 何 处 
下 手 是 无 关 紧 要 的 . 

我 们 转向 讨论 拉 普 拉 斯 变换 , 令 


mm(A = [ op, (tdt. (6.3) 


因为 卷 积 对 应 于 拉 普 拉 斯 变换 的 乘积 , e~“ 的 变换 为 1/(c + 入), 所 以 方程 组 (6.1) 
等 价 于 


maN) = xl + omani (Nn#0, (6.4a) 
rN = HK + Eo) + om ON)), (6.4b) 


[同样 的 结果 可 由 (6.2) 得 到 , 因为 
A erXP'(t)dt = —Po(0) + MXrn(A)， 
0 


此 式 可 用 分 部 积分 公式 推出 . ] 
线性 方程 组 (6.4) 与 在 第 1 卷 第 14 章 中 过 到 的 随机 游 动 方程 有 相同 的 形式 ， 
我 们 用 同一 方法 来 解 它 . 二 次 方程 


cqs2 一 (c+ 和 Ms+cp=0 (6.5) 
的 根 为 


SA 


V(c+ MN: — 4cpg 加 
= Vt Em oss (6.6) 
容易 验证 , 对 于 任意 常数 4、, B、, 线性 组 合 rn(A) = 4hsx + Bso? 满足 (6.4a)j(n 一 
1,2,…), 系数 可 以 这 样 选取 , 以 便 得 到 ro(A) 和 mi(A) 的 精确 值 . 给 定 ro 和 ma, 可 以 
从 (6.4a) 递 推 地 算出 2,73,…, 从 而 对 于 > 0, 每 个 解 具 有 mn(A) = Ass 十 Bao 
的 形式 . 当 入 一 co 时 , ss 一 0, 但 ox 一 co. 因为 我 们 的 rn(》) 在 无 穷 远 处 是 有 界 
的 , 所 以 我 们 必须 有 BA = 0, 从 而 


Tm(A) 一 To(A)s， n=0,1,2,.…. (6.7a) 
@ 它们 是 第 1 卷 第 17 章 ,一般 生 灭 过 程 的 方程 (5.2) 的 一 个 特殊 情形 ,可 以 用 类 似 的 方法 推导 出 来 
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对 于 m < 0, 我 们 可 类 似 地 得 到 
Tm(A) = To(A)oA = (p/9) "moNss", n=0,-1,—2,.…. (6.7b) 


代入 (6.4b), 我 们 最 后 得 到 
1 


VT Ni — cp 


wo) = G68) 
因此 ,所 有 的 mn(A) 是 唯一 确定 的 

即使 不 知道 解 的 明显 公式 ， 也 可 以 从 这 些 拉 普 拉 斯 变换 得 到 许多 信息 例如 ， 
因为 拉 普 拉 斯 变换 的 乘积 对 应 于 卷 积 ， 所 以 由 (6.7) 的 形式 似乎 应 有 : 对 于 n> 0， 
概率 Pn 具有 Pn = F" 太 P? 的 形式 , 其 中 FF 是 一 个 变换 为 s 的 (可 能 为 亏损 的 ) 
概率 分 布 . 这 个 狂想 可 以 用 概率 论 方法 验证 如 下 . 如 果 在 时 刻 上 随机 洲 动 位 于 点 nu, 
那么 首次 通过 n 一 定 发 生 在 某 个 时 刻 + < 在 这 种 情形 下 , 在 时 刻 上 又 位 于 点 的 
(条 件 ) 概率 等 于 P(t 一). 于 是 R 是 机 和 首次 通过 n 的 时 刻 的 分 布 及 的 卷 积 . 
这 个 首次 通过 时 间 又 是 n 个 同 分 布 独立 随机 变量 的 和 , 即 依次 通过 1,2,…,n 之 间 
的 等 竺 时 间 之 和 . 这 就 说 明了 (6.7) 形式 ， 并 同时 证 明了 (对 于 n > 0) 是 首次 通 
过 n 的 分 布 F 的 变 接 . 除非 = 9 = 当 , 这 个 分 布 是 亏损 的 ,因为 只 有 在 p= 9 一 
时 sg0 二 1. 

在 现在 的 情形 下 , 我 们 幸好 可 以 把 变换 s、 逆转 . 在 13.3 节 例 (d) 中 曾 证 明 , (和 
VY 一 了 1)"( 对 入 > 1) 是 (r/z) 太 (z) 的 普通 拉 普 拉 斯 变换 . 把 和 换 成 M2cV55 只 改 
变 了 一 个 尺度 因子 , 把 和 换 成 \+ 表示 用 -et 乘 以 密度 . 由 此 推出 唆 ( 其 中 > 0) 
是 密度 为 

fl = VI nt nl2eVpRl)e® (609) 
的 分 布 Fn 的 普通 拉 普 拉 斯 变换 . (6.9) 是 首次 通过 n > 0 的 时 间 的 密度 .在 2.7 节 (7.13) 
中 曾 用 直接 方法 证 实 过 这 个 事实 [从而 现在 的 论证 可 以 看 作为 2-+1(z) 的 拉 普 拉 
斯 变换 的 一 个 新 推导 ]. 

可 以 类 似 地 得 到 概率 Pu(b) 的 一 个 明显 表达 式 . 在 13.11 节 的 习题 8 中 我 们 求 
出 了 到 的 拉 普 拉 斯 变换 ,刚才 亿 述 的 参数 调整 直接 导致 明显 公式 


P(t) = V(p/q) "eIn(2cVp4 t), n=0,+1,+2,.…. (6.10) 


此 外 , 这 个 结果 可 由 2.7 节 (7.7) 中 的 直接 方法 导出 . 

正如 我 们 在 第 1 卷 17.7 节 中 看 到 的 那样 ,除了 被 局 限于 n > 0 以 及 对 于 边界 
状态 n = 0 有 一 个 相应 的 不 同方 程 外 , 各 种 中 继 线 和 服务 问题 都 导致 同一 微分 方 
程 组 (6.2). 下 面 两 个 例子 将 说 明 在 这 样 的 情形 下 怎样 运用 现在 的 方法 . 
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例 (a) ”一 个 服务 员 的 排队 . 我 们 考虑 一 个 服务 员 , 如 果 服 务 员 忙 着 , 那么 新 来 的 顾 
客 就 要 排队 . 系统 的 状态 由 排队 的 顾客 (包括 正在 得 到 服务 的 顾客 ) 的 人 数 n> 0 给 
出 . 到 达 时 刻 间 隔 和 服务 时 间 是 相互 独立 的 , 且 分 别 具 有 指数 密度 Xe-X 和 He 4 
这 是 第 1 卷 17.7 节 中 多 个 服务 员 的 例 (b) 的 一 个 特殊 情形 , 但 是 我 们 将 重新 推导 
微分 方程 , 以 便 说 明 它 和 我 们 现在 的 随机 游 动 模型 的 密切 关系 . 

假设 现在 有 n 一 1 个 顾客 在 排队 . 状态 的 下 一 个 变化 是 +1( 如 果 它 是 由 于 新 顾 
客 的 到 来 引起 的 ) 和 一 1( 如 果 它 是 由 于 现在 的 服务 时 间 终 止 而 引起 的 ). 这 种 变化 的 
等 待 时 间 7 是 这 两 个 事件 的 等 待 时 间 的 较 小 者 , 从 而 P{T > 甘 = e“,， 其 中 我 们 
设 e= 入 + 人 当 变 化 发 生 时 , 它 以 概率 p = X/e 等 于 +1, 以 概率 4 = jv/c 等 于 
一 1. 换 名 话说, 只 要 仍 有 人 在 排队 , 我 们 的 过 程 就 符合 随机 游 动 模型 ， 从 而 微分 方 
程 (6.2) 对 n> 1 成立. 但 是 当 服 务 员 空闲 时 ,变化 只 能 由 新 顾客 的 到 来 引起 ， 因 
此 对 于 n= 0, 微分 方程 旺 形式 


P(t) = —cpPolt) + cqPi(t). (6.11) 


假设 服务 员 原来 是 空闲 的 ， 即 Po(0) = 1, 我 们 现在 来 解 这 些微 分 方程 . 对 于 
n 之 1, 拉 普 拉 斯 变换 rn(A) 又 满足 方程 (6.4a), 但 是 对 于 n = 0, 我 们 由 (6.11) 得 到 


(cp + Nro(N) = 1+ cqri(\). (6.12) 


和 在 一 般 的 随机 游 动 中 一 样 , 对 于 n > 1, 我们 得 到 rn(A) = mo( 和 )sx, 但 是 由 (6.12) 
看 出 ， 


A 1 一 入 之 村 
To(A) = pr ey (6.13) 


于 是 

1— sa 
入 

我 们 知道 , sx 是 密度 为 (6.9) 的 分 布 Fn 的 拉 普 拉 斯 变换 , 因子 1/ 和 相应 于 积分 . 因 

此 , 对 于 n>0 


mn(A) + mn+i(A) 十 … 一 


(s+ stl+..) = sR/A. 


Pnlt) + Pri(t) +*** = Fn(t), (6.14) 
其 中 栈 是 密度 为 (6.9) 的 分 布 . 对 n ==0, 左边 当然 是 1. 
例 (b)” 忙 期 中 的 起 伏 . 我 们 考察 同一 个 服务 员 , 但 是 只 在 忙 期 中 考察 他 . 换 句 话 
说 , 假设 第 一 个 顾客 在 时 刻 0 到 达 空 闲 的 服务 员 那 里 ， 我 们 让 过 程 在 服务 员 变 成 
空闲 时 终止 . 从 分 析 上 讲 , 这 蕴含 现在 n 局 限于 n > 1, 初始 条 件 是 Pi(0) = 1. 对 
于 mn” > 2, 微分 方程 (6.2) 没有 什么 变化 , 但 是 由 于 没有 和 零 状态 , 第 一 个 方程 的 项 
cpPo(t) 消失 了 . 于 是 当 n > 2 时 拉 普 拉 斯 变换 rn(A) 满足 (6.4a), 对 于 n= 1 满足 


(M+ om(N) = 1+cgr2(N). (6.15) 
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同 前 , 对 于 n > 2, 我 们 得 到 mm(A) = ma(A)s 但 是 mi( 和 ) 将 由 (6.15) 确定 . 
简单 的 计算 表明 ma(A) = ss/(cp), 从 而 rn(》) = sx(cp). 于 是 利用 上 例 我 们 可 得 到 
最 后 的 结果 : Pn(t) = 及 (6)/(cp), 其 中 记 由 (6.9) 给 出 . 

为 了 保证 忙 期 有 有 限 的 持续 时 间 , 我 们 假设 p < 9. 用 了 表示 忙 期 的 持续 时 间 . 
那么 P{T > 甘 = P(t) = 站 P(t). 于 是 P'(t) = -cqPi(t), 这 可 通过 把 诸 微 分 方程 
相 加 得 到 , 也 可 用 如 下 的 概率 方法 得 到 . 如 果 忽 略 具 有 可 忽略 的 概率 的 事件 ,那么 
为 使 忙 期 在 t 和 t+h 之 间 终 止 , 当 且 仅 当 在 时 刻 t 只 有 一 个 顾客 在 排队 , 生 他 的 
服务 在 从 t 开始 的 长 度 为 h 的 下 一 个 时 间 区 间 内 终止 . 这 两 个 条 件 的 概率 分 别 为 
R(t) 和 cqh +o(h), 从 而 了 的 密度 满足 条 件 ~P'(t) = cqPi(t). 因此 , 忙 期 的 持续 
时 间 的 密度 为 


—P'(t) = Va/pt-1h (2cvpat)e. (6.16) 
这 个 结果 曾 在 12.4 节 例 (a) 中 用 不 同 的 方法 导出 过 , 并 且 曾 被 利用 于 6.9 节 例 (e) 
排队 过 程 中 . (见习 题 13. ) p 
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我 们 回 到 局 限于 整数 1,2,… 的 马尔 可 夫 过 程 . 我 们 曾 在 第 1 卷 17.9 节 和 10.3 
节 中 推导 过 科 尔 莫 戈 罗 夫 微分 方程 . 本 节 包 含 一 个 利用 拉 普 拉 斯 变换 所 作 的 独立 论 
述 . 为 使 讨论 自给 自足 ,我 们 给 出 (以 卷 积 方程 的 形式 给 出 的 ) 基本 方程 的 一 个 新 
推导 . 

基本 假设 是 , 如 果 在 某 个 时 刻 7,X(7) =i, 那么 在 区 间 7 < t<7+ 了 内 , X(t) 
的 值 将 保持 不 变 (此 区 间 的 长 度 具 有 指数 密度 cie-“*); 它 然后 跳 由 到 js 的 概率 是 
pij. 给 定 X(0) =i, 那么 X(t) = 上 关 计 的 概率 Pix(t) 现在 可 以 通过 对 所 有 可 能 的 时 
刻 以 及 首次 嗣 史 的 结果 求 和 计算 出 来 : 


Pxlt) = > cie-ozpiy Pix(t 一 adz， (k# 避 ). (7.18) 


对 于 二 我 们 必须 加 上 一 项 以 说 明 不 发 生 跑 电 的 可 能 性 : 
RO = +t fe ierezpi Pii(t — z)dz. (Clb) 


@ 本 节 叙 述 的 理论 不 经 本 质 的 改变 就 可 应 用 于 10.3 节 的 一 般 跳 路 过 程 . 不 用 拉 普 拉 斯 变换 而 用 概率 
本 身 来 重新 叙述 其 证 明 将 是 一 个 很 好 的 练习 ， 这 样 证 明 就 不 那么 优美 了 ， 但 是 此 时 这 个 理论 可 以 
推广 到 系数 cj 和 pyx 都 依赖 于 t 的 非 平稳 情形 . W. Feller, Trans. Amer. Math. Soc., vol. 
48(1940)pp. 488-515 [erratum vol. 58, p. 474 ] 对 一 般 的 跳 腾 过 程 讨论 了 这 种 形式 的 理论 . 


关于 以 样本 轨道 为 基础 的 概率 处 理 ， 见 钟 开 莱 (1967)、， 关 于 向 半 马 尔 可 夫 过 程 的 推广 见习 题 
14. 
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这 些 方程 可 用 科 罗 内 克 符 号 6ix 统一 起 来 , 当 上 = i 时 6ix 二 1, 当 k 关 i 时 6i = 人 0. 
向 后 方程 (7.1) 是 我 们 的 出 发 点 9， 给 定 任意 的 c; > 0 和 一 个 随机 矩阵 P = 
(pik), 我 们 来 求 满足 (7.1) 的 随机 和 矩阵 P(t) = (Pix(t))- 
另外 , 如 果 我 们 假设 任 一 有 限时 间 区 间 只 包含 有 限 个 跳跃 , 那么 我 们 可 以 通过 
在 t 之 前 的 最 后 一 个 跳 路 的 时 刻 来 修改 这 个 论证 . 从 j 向 的 跳跃 的 概率 的 密度 
为 Py(z)cjpjk, 而 在 x 和 上 + 之 间 没 有 跳跃 的 概率 等 于 ed- 代替 (7.1), 我 们 
得 到 向 前 方程 


to0 
Pik(t) = iret +/ DO P(r)epjre dz. (7.2) 
0 和 


然而 正如 我 们 将 要 看 到 的 那样 ， 存在 一 个 具有 无 穷 多 次 嘴 交 的 过 程 满足 向 后 方程 ， 
从 而 构成 过 程 的 基础 的 基本 假设 并 不 蕴含 向 前 方程 . 这 种 现象 曾 在 10.3 节 和 第 1 
卷 17.9 节 中 讨论 过 . 
利用 拉 普 拉 斯 变换 Sy 
Tx(N) = / eX.Pa (bdt, (73) 


向 后 方程 (7.1) 呈 形 式 


TIk(A) = 起 全 + Dem (7.4) 


我 们 现在 转向 更 方便 的 矩阵 记号 . (矩阵 计算 法 则 同样 适用 于 具有 非 负 元 素 的 无 穷 
矩阵 , ) 我 们 引入 和 矩阵 五 (A) = (Ex(A),， 类 似 地 引入 矩阵 P(t) = (Px(b)) = (pik) 
及 具有 元 素 ci 的 对 角 矩 阵 c, 我 们 用 1 表示 所 有 元 素 都 等 1 的 列 向 量 . 于 是 矩阵 4 
的 行 和 为 41. 最 后 工 是 单位 矩阵 . 
于 是 由 (7.4) 显然 可 见 ， 向 后 方程 (7.1) 可 以 转化 为 
(A+cIT(A) = 工 +cpI(A)， (7.5) 
向 前 方程 可 以 转化 为 
开 (N(A+ec) =I+H(Nep. (7.6) 
@ 引入 变量 替换 y 一 上 一 = 可 使 我 们 容易 进行 微分 . 可 以 看 出 ， 卷 积 方程 (7.1) 等 价 于 微分 方程 组 
P(t) = —ciPin(t) + es > PiPyxk(t) 
和 初始 条 件 Pii(0) = 1，Pix(0) = 0(k 去 让 .这 个 方程 组 和 第 1 卷 17.9 节 (9.14) 一 致 ， 所 不 同 


的 只 是 那里 的 系数 ci 和 Piy 依赖 于 时 间 ， 从 而 Pik 是 2 个 时 刻 + 和 上 的 函数 ,而 不 是 持续 时 间 
一 7 的 函数 . 
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为 了 构造 最 小 解 ， 我 们 递 推 地 设 
(A+c)ITO(A) = 工 (A+c)ITO+D(A) = 工 +cpICO(A)， (7.7) 
对 于 区 (9(A) 的 行 之 和 , 我 们 引入 记号 
A N=1- "0), (7.8) 
代入 (7.7) 并 注意 到 pl = 1, 就 可 看 出 
Q+ oHDA) = cp YO). (7.9) 
因为 $0 = 0, 所 以 对 于 所 有 的 n,é("( 和 ) > 0， 从 而 矩阵 和 TW"™ (和 ) 是 次 随机 的 . 它 
们 的 元 素 是 n 的 不 减 函数 , 因此 存在 一 个 有 限 极限 
IC = ,lm I™(N), (7.10) 


并 且 AIT(%)(A) 是 次 随机 的 或 随机 的 . 
显然 卫 ()( 和 ) 满足 向 后 方程 (7.5)， 对 于 任 一 其 他 非 负 解 卫 (^) 我 们 显然 有 
五 (A) > (0(A). 根据 归纳 法 , 对 于 所 有 的 n 有 荆 () > 了 "(A). 于 是 


I(N) > HN). (7.11) 


本 (%)(A) 也 满足 向 前 方程 (7.6) 这 件 事 并 不 显然 . 为 了 说 明 这 一 点 , 我们 用 归 
纳 法 来 证 明 
HVANA+e)=I+H" (MN)ep. (7.12) 


这 对 n = 1 是 正解 的 . 假设 (7.12) 成 立 , 代入 (7.7) 就 可 得 到 
QA+t+oONM NA+te) = M+ce+[I+ cpH "(Mlep. (7.13) 


括号 内 的 表达 式 等 于 (和 十 c) 了 I 中 (和 ). 用 (+c)-! 左 乘 (7.13) 就 可 得 到 把 ” 换 成 
n 十 1 的 (7.12). 因此 这 个 关系 式 对 所 有 的 m 成立, 从 而 开 (~)(A) 满足 向 前 方程 

重复 导致 (7.11) 的 论证 , 我 们 同样 可 以 看 出 向 前 方程 (7.6) 的 任 一 非 负 解 满足 
页 (A) > (A). 由 于 这 个 原因 ， 开 (cs)(A) 被 称 为 最 小 解 . 
定理 1 存在 一 个 行 和 < -1 的 答 阵 开 (co)(A) > 0, 它 满足 (7.5) 和 (7.6), 且 对 于 (7.5) 
或 (7.6) 的 每 一 个 非 负 解 ,不 等 式 (7.11) 都 成 立 . 
定理 2 ”最 小 解 是 这 样 一 族 次 随机 或 随机 答 阵 已 ( 划 的 拉 普 拉 斯 变换 ,已 (t) 满 足 查 普 
要 - 科 尔 黄 戈 罗 夫 方程 

Pl(s+t)= P(s)P(t) (7.14) 
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以 及 向 后 方程 和 向 前 方程 (7.1) 和 (7.2)， 或 者 所 有 的 矩阵 P(t) 和 AHA)(t > 
0, 入 > 0) 都 是 严格 随机 的 或 者 都 不 是 严格 随机 的 . 

证 我 们 去 掉 上 标 co, 把 了 (和) 记 为 五 (). 由 定义 (7.7) 显然 可 见 ZY(A) 是 
正 函数 PK) 的 变换 , 这 个 P40) 是 有 限 多 个 指数 分 布 的 卷 积 . 由 (7.8) 知 ,，P(™(t) 
的 行 和 构成 一 个 以 1 为 界 的 单调 序列 ， 由 此 推出 五 (A) 是 一 个 次 随机 或 随机 矩阵 
P(t) 的 变换 . 由 (7.5) 和 (7.6) 显然 可 见 P(t) 满足 原来 的 向 前 方程 和 向 后 方程 . 这 
些 结果 蕴含 P(t) 连续 地 依赖 于 t. 由 此 推出 ,如 果 对 于 某 个 t, 第 i 行 的 和 小 于 1， 
那么 对 于 所 有 的 和 ,五 (^) 的 第 i 行 的 和 小 于 和 -! ,反之 亦 然 . 

为 了 用 拉 普 拉 斯 变换 重新 叙述 (7.14), 我 们 用 ef 乘 以 (7.14), 并 对 s 和 上 
积分 . 右边 导致 矩阵 乘积 开 (A) 开 (v), 左边 容易 通过 代 换 z=t+s，y = -t+s 来 
计算 . 结果 是 

-0 -20 = NN); (7.15) 
反之 , (7.15) 绚 含 (7.14). [这 个 论证 曾 用 于 13.8 节 例 (a) 中 . ] 

为 了 证 明 (7.15), 考虑 矩阵 方程 


(WA+cQ=4+cpQ. (7.16) 


如 果 4 和 Q 是 非 负 的 , 那么 显然 Q > (和 + oj-14 = I (A)A. 根据 归纳 法 ,对 
于 所 有 的 有 Q > 工 中 (A)4.， 因此 , 8 > 了 (A)A. 于 是 了 I(v) 满足 具有 4 = 
了 + (和 一 v) 五 (v) 的 (7.16), 从 而 对 于 入 > v， . 


Hn(v) > HO + A-N) HANIY). (7.17) 
另 一 方面 ,右边 的 项 满足 把 和 换 成 v 的 向 前 方程 (7.6). 由 此 推出 它 > 开 (v). 因 
此 , (7.17) 中 的 等 号 成 立 . 这 就 完成 了 证 明 .@ > 


为 了 看 一 看 矩阵 IT(™)(A) 是 不 是 严格 随机 的 @， 我 们 回 到 关系 式 (7.8) 和 
(7.9). 因为 诸 元 素 6" (A) 是 m 的 不 增 函数 ， 所 以 存在 一 个 极限 E(A) = im eeD(A)， 
使 得 

ATON1=1-é(N) (7.18) 


(M+c)é(N)=cp NN), 0gEN) <1. (7.19) 


@ (7.15) 是 有 界 列 向 量 组 成 的 巴 拿 赫 空 间 上 的 收缩 算 子 族 下 (和 ) 的 预 解 方程 , 我 们 在 13.10 节 中 已 
看 到 , 为 使 它 成 立 ， 当 且 仅 当 这 些 变换 的 值 域 是 与 和 无 关 的 ,最 小 特征 保证 了 这 一 点 (利用 边界 理 
论 , 值 域 的 特征 是 在 “实际 出 口 边 界 ” 上 向 量 等 于 0). 

@@ 敬告， 用 列 向 最 1 采 以 向 前 方程 似乎 可 以 导致 恒等式 AIT(A)I = 1, 但 是 所 涉及 到 的 级 数 可 能 发 
散 . 如 果 cs 是 有 界 的 ,那么 这 个 程序 是 合理 的 ( 系 1)- 
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另 一 方面 , 我 们 有 
A+o)EWN) = cl = cpl. (7.20) 


因此 , 对 于 满足 (7.19) 的 任 一 向 量 6(A)， CD)(A) > 5(A). 由 归纳 法 可 从 (7.9) 推出 ， 

对 于 所 有 的 m， CD)(A) > 上 (A)， 从 而 (7.18) 中 的 向 量 5(A) 是 满足 (7.19) 的 最 大 向 

基 . 于 是 我 们 有 

定理 3 ”最小 解 的 行 亏 量 可 以 由 满足 (7.19) 的 完全 确定 的 最 大 向 量 E(A) 来 表示 . 
因此 , 为 使 MT(Ce)(A) 是 严格 随机 的 , 当 且 仅 当 (7.19) 列 含 (CA) = 0. 

系 1 如 果 对 所 有 的 i, ci < M < oo0， 那么 最 小 解 是 严格 随机 的 (因此 ， 向 前 方程 

和 向 后 方程 者 不 具有 其 他 的 解 ). 

证 因为 c/(X+c) 是 e 的 增 函 数 ,所 以 根据 归纳 法 可 从 (7.19) 推出 , 对 于 所 有 的 


EC < (a2) + (7.21) 


因此 6(A) = 0. > 

如 果 4(A) 是 由 形 如 &:( 和 A)me( 和 ) 的 元 素 组 成 的 矩阵 [其 中 办 (A) 是 任意 的 ]， 那 
么 开 ( 和 A) + 4(A) 也 是 向 后 方程 (7.5) 的 解 . 总 可 以 选择 这 样 的 A( 和 ), 以 便 得 到 是 满 
足 查 普 曼 - 科 尔 莫 臣 罗 夫 方 程 的 容许 矩阵 P(t). 我 们 将 在 14.8 节 中 举例 说 明 这 个 
程序 . 对 应 的 过 程 的 特征 可 由 在 有 限时 间 区 间 内 包含 无 穷 多 个 跳跃 的 转移 来 刻 划 . 
非常 奇怪 的 是 ,即使 用 最 后 一 次 跳跃 对 它们 所 做 的 解释 是 错误 的 ,向 前 方程 也 可 以 
被 满足 . 

这 些 是 主要 的 结果 ， 我 们 用 一 个 准则 来 结束 本 节 ， 这 个 准则 在 应 用 中 是 有 用 
的 , 而 且 它 非常 有 趣 , 因为 它 的 证 明 引进 了 位 势 理 论 的 概念 ，(7.25) 的 核 有 是 一 个 
典型 的 位 势 . 

我 们 假设 c > 0, 并 把 (7.19) 改写 成 形式 


é€) + Xe ECOA) = pé(N). (7.22) 
用 p* 乘 以 上 式 并 对 大 = 0,1,…,n 一 1 求 和 , 我 们 得 


n—l 
€0) +AD ,pre (NN) =p"€). (7.23) 
k=0 


这 蕴含 p"6(A) 单调 地 依赖 于 n, 从 而 p"E( 和 A) 一 rz, 其 中 z 是 满足 9 


pr=z, é(z)<r<1 (7.24) 
@ 不 难看 出 , z 是 与 和 无 关 的 , 且 AT(ce)(A) = 工 一 5(A). 


434 第 14 章 拉 普 拉 斯 变换 的 应 用 


的 最 小 列 向 量 . 
现在 用 2 
了 = pe! (7.25) 
k=1 
来 定义 一 个 矩阵 ( 它 可 能 具有 无 穷 多 个 元 素 ). 在 (7.23) 中 令 n 一 co, 我 们 得 到 
ECA) 十 ATE(A) = 7. (7.26) 


特别 这 蕴含, 对 于 每 个 使 Tex = oo 的 上 人 CA) = 0. 如 果 上 是 矩阵 为 卫 的 马尔 可 
夫 链 的 常 返 状态 , 那么 情况 是 这 样 的 , 因此 我 们 有 

村 2 当 短 阵 为 p 的 离散 马尔 可 夫 链 只 有 常 返 状态 时 ， 最 小 解 是 严格 随机 的 (从 而 
是 唯一 的 ). 


14.8 ” 例 : 纯 生 过 程 


在 本 节 中 我 们 不 研究 一 般 理 论 , 而 是 详细 地 考虑 只 可 能 有 形 如 i 一 ;+1 的 转 
移 的 过 程 ， 因 为 它们 为 由 非 唯一 性 产生 的 过 程 的 类 型 提供 了 很 好 的 例子 . 为 了 避免 
不 足 道 的 东西 , 我 们 假设 对 于 所 有 的 i,c: > 0. 由 定义 piit1 = 1, 而 对 于 所 有 其 他 
的 组 合 pik = 0. 于 是 向 后 方程 和 向 前 方程 化 为 


(入 十 ci)TRk(A) 一 ciIEHLk(A) = 6ik (8.1) 
和 
(入 十 ck) Dik(A) — criIi,k-1(N) = 6ik, (8.2) 
其 中 当 i=k 时 6i 等 于 1, 否则 等 于 0. 为 了 简单 起 见 , 我 们 令 


1 
m= 


a _ 
ry (8.3) 


pi 是 在 i 上 的 逗留 时 间 的 分 布 ( 它 是 指数 型 的 ) 的 拉 普 拉 斯 变换 , 7; 是 这 个 逗留 时 
间 超 过 t 的 概率 的 普通 拉 普 拉 斯 变换 . 要 记 住 7; 和 p; 对 和 的 依赖 性 . 
例 (a) 最 小 解 . 容易 验证 


Pipit1***Pk-1Tk, ki (8.4) 
， 


TIkCO = 
= 0 k<i 


是 (8.1) 和 (8.2) 的 最 小 解 . 它 反映 了 这 样 的 事实 , 即 从 i 向 k < i 转移 是 不 可 能 的 ， 
以 及 到 达 k > i 的 时 刻 是 在 i,i+ 1,…,k 一 1 上 的 上 个 独立 的 逗留 时 间 之 和 . 
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设 Rix(t) 表示 由 (8.4) 所 定义 的 过 程 的 转移 概率 . 我 们 来 证 明 下 述 重要 结果 , 这 
个 结果 曾 在 第 1 卷 17.4 节 中 用 其 他 方法 导出 过 . 


引 理 ”如 果 
Den = 00, (8.5) 
那么 对 于 所 有 的 i 和 > 0， 
Pux(G) =1. (8.6) 
k=é > 
否则 (8.6) 对 所 有 的 i 都 不 成 立 . 
证 注意 和 k=1-pk, 从 而 
AHi(N) + :+ Hitn(N)] = 1— pe:** pitn: (8.7) 


于 是 为 使 (8.6) 成 立 , 当 且 仅 当 对 于 所 有 的 入 > 0， 
Pipit1'**pn + 0, n— 00. (8.8) 


如 果 cn 一 00, 那么 pn ~e-Me", 从 而 在 这 种 情形 下 (8.5) 是 (8.8) 的 充 要 条 件 . 另 
一 方面 , 如 果 cn 不 趋 于 无 穷 , 那么 存在 一 个 数 4 < 1, 使 得 对 于 无 穷 多 个 mpn < q， 
因此 (8.8) 和 (8.5) 成 立 . > 

在 (8.5) 中 的 级 数 是 发 散 的 情形 下 , 没有 什么 意外 的 事 : cn 唯一 地 确定 这 样 一 
个 纯 生 过 程 , 使 得 此 过 程 满足 作为 我 们 的 出 发 点 的 基本 公设 . 因此 , 今后 我 们 假设 
二 cf < oo 

亏 量 1 一 Pix(t) 是 系统 在 时 刻 t 前 通过 所 有 状态 或 到 达 “ 边 界 co” 的 概率 . 
到 达 时 刻 是 在 zi 十 1,… 上 逗留 的 时 间 之 和 . 这 个 级 数 以 概率 1 收敛 , 因为 平均 逗 
留 时 间 1/cn 之 和 收敛 . 

在 一 个 从 i 开始 的 过 程 中 , 过程 的 寿命 (直到 到 达 oo 的 时 肇 ) 的 拉 普 拉 斯 变换 
为 


= lim pipiti*** pitns (8.9) 
且 三 满足 方程 (7.19), 即 
A+o)é = ciéiri: (8.10) 


对 于 行 和 , 我 们 从 (8.7) 得 到 


sm =1—&. (8.11) 


k=i 
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例 (b) 。” 回 返 过 程 . 从 过 程 (8.4) 开始 ,可 按 如 下 方法 定义 新 的 过 程 . 选择 数 qi, 使 
得 4 > 0， 台 qi = 4. 我 们 假定 当 到 达 oo 时 ,条 统 的 状态 以 概率 0 gi 立即 转移 到 i. 
于 是 原来 的 过 程 重新 开始 , 直到 第 2 次 到 达 co 时 为 止 . 在 两 次 到 达 oo 之 间 经 过 的 
时 间 是 一 个 拉 普 拉 斯 变换 为 
TN = > qi (8.12) 
的 随机 变量 过程 的 马尔 可 夫 特 征 要 求 ， 在 第 2 次 到 达 oo 时 过 程 以 同样 的 方式 
重新 开始 . 我 们 现在 用 转移 概率 的 拉 普 拉 斯 变换 NX*( 和 ) 来 描述 新 过 程 的 转移 概率 
Pset(t). 一 个 从 时 刻 0 的 i 到 时 刻 t 的 上 而 中 间 不 经 过 oo 的 转移 的 概率 的 变换 为 
(8.4). 因此 , 在 恰好 经 过 oo 一 次 后 到 达 上 的 概率 的 拉 普 拉 斯 变换 为 & ;qj Ze(A)， 
第 2 次 到 达 co 的 时 刻 的 变换 为 &7( 和 ). 如 果 考虑 更 多 次 的 回 返 ,那么 由 上 述 方法 
可 以 看 出 , 我 们 一 定 有 
TO = Tix(N) + 6 Dur), (8.13) 
了 
其 中 [1 一 7( 和 )]-! = 人 7"( 和 ) 表示 通过 oo 的 次 数 . 利用 (8.11) 经 过 简单 计算 可 说 明 
(8.13) 中 的 行 和 等 于 1/ 和 , 从 而 RE*() 是 转移 概率 Pret(t) 的 严格 随机 和 矩阵 的 变换 . 
容易 验证 ， 新 过 程 满足 向 后 方程 (8.1)， 但 不 满足 向 前 方程 (8.2)， 这 是 应 该 的 ， 
因为 不 一 定 存在 最 后 一 次 跳跃 而 违反 了 导致 向 前 方程 的 公设 . 
例 (c)” 双 侧 纯 生 过 程 . 为 了 得 到 一 个 既 满足 向 前 方程 又 满足 向 后 方程 的 过 程 , 我 
们 通过 令 系统 的 状态 跑 遍 0, 士 1, 士 2,… 来 修改 上 面 的 纯 生 过 程 . 除 此 之 外 约定 仍然 
不 变 , 诸 常数 c; > 0 对 所 有 的 整数 都 有 定义 , 并且 只 能 从 ;转移 到 ;+ 1. 我 们 又 假 
设 攻 1/cn < oo( 现 在 是 从 -oo 到 +oo 求 和 ). 
最 小 解 也 没有 改变 , 它 仍 由 (8.4) 给 出 . 极限 


mk = ,lim Tk(N) 一 mkPk-1Pk-2pk-3 "~ (8.14) 


存在 , 并 且 可 以 看 作 是 “从 时 刻 0 的 -co 到 时 刻 上 的 大 的 转移 的 概率 P_oo,k(t)” 的 
变换 . 从 这 一 起 点 出 发 , 过程 将 跑 遍 从 -co 到 co 的 所 有 状态 , 并 且 在 拉 普 拉 斯 变 
换 为 -ww = im én 的 时 刻 上 “到 达 co”. 我 们 现在 按 如 下 方法 定义 一 个 新 过 程 . 
它 开 始 时 是 一 个 相应 于 最 小 解 (8.4) 的 过 程 , 但 是 在 到 达 co 时 它 从 -oo 重新 开始 ， 
过 程 就 这 样 永远 地 继续 下 去 . 根据 例 (b) 中 所 用 过 的 构造 法 , 对 于 转移 概率 我 们 有 
了 CA) = DA(N) 十 5 各 (8.15) 

四 念 总 4 二 工 可 得 到 回 返 过 程 的 变形 , 在 到 达 co 上 时 ,过 程 以 概率 1 一 全 di 终止. 
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容易 验证 ，I1 于 满足 向 前 方程 (8.2) 和 向 后 方程 (8.1). 这 个 过 程 满足 导致 向 后 方程 的 
假设 , 但 不 满足 导致 向 前 方程 的 假设 . 
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正如 我 们 所 期 望 的 那样 ， 整数 上 的 马尔 可 夫 过 程 的 转移 概率 Pij(t) 当 t 一 oo 
时 的 性 质 类 似 于 离散 马尔 可 夫 链 中 高 阶 转移 概率 的 性 质 , 但 不 会 出 现 像 周期 链 那 
样 的 麻烦 事 了 . 作为 第 1 卷 第 15 章 的 遍历 定理 的 简单 推论 , 定理 1 证 实 了 这 个 事 
实 . 于 是 我 们 所 关心 的 主要 事情 是 计算 14.7 节 的 一 般 过 程 的 极限 ， 并 说 明 怎样 求 
首次 通过 时 间 . 所 用 的 方法 具有 广泛 的 适用 范围 . 
定理 1 假设 对 于 随机 答 阵 P(t) 所 构成 的 族 有 
P(s+t) = P(s)P(t), (9.1) 


且 当 t 一 0 时 P(t) 一 工 如 果 所 有 的 Pi 者 不 恒 等 于 09， 那么 当 t 一 oo 时 


Pix(t) 一 uk (9.2) 
其 中 或 者 对 有 的 ,uk 二 0, 或 者 
uk >0, Dur=1, (9.3) 
k 
并 且 
Du Pr(t) = ux. (9.4) 
4 


当 对 于 某 个 ! > 0 存在 一 个 满足 (9.4) 的 概率 向 量 (wu1,u2,…) 时 ， 第 2 种 情况 发 生 . 在 
这 种 情形 下 , (9.4) 对 所 有 的 t > 0 成 立 , 概率 向 量 以 是 唯一 的 . 

(正如 在 第 1 卷 17.6 节 中 所 说 明 的 那样 , 重要 的 特点 是 这 些 极限 不 依赖 于 i, 这 
说 明 初始 条 件 的 影响 是 渐 近 可 忽略 的 . ) 
证 ”对 于 固定 的 6 > 0, 考虑 一 个 矩阵 为 P(6), 高 阶 转移 概率 为 P"(6) = P(n6) 的 
离散 马尔 可 夫 链 . 如 果 所 有 的 元 素 Pix(n6) 是 最 终 为 正 的 , 那么 这 个 链 是 不 可 约 的 
且 是 非 周期 的 . 根据 第 1 卷 15.7 节 的 遍历 定理 , 这 个 断言 对 局 限于 数 例 6,26, 36,.… 
的 上 是 正解 的 . 因为 2 个 有 理 数 有 无 穷 多 个 公 倍数 , 所 以 当 一 co 时 Pik(n5) 的 极 
限 对 所 有 的 有 理 数 5 都 是 相同 的 . 为 了 完成 证 明 ， 只 需 证 明 Rik(t) 是 + 的 一 致 连续 
函数 ,并 且 对 于 较 大 的 上 是 正 的 就 行 了 . 根据 (9.1)， 


Pii(s)Pir(t) < Pir(s +t) < Pix(t) + [1 — Pa(s)] (9.5) 


@ 引入 这 个 条 件 只 是 为 了 避免 这 样 的 不 足 道 的 情形 , 使 得 局 限于 适当 的 状态 集合 就 能 防止 这 些 情形 . 
不 难看 出 , 这 个 条 件 蕴含 Pix(t) 对 所 有 的 t 的 严格 正 性 . 
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[第 1 个 不 等 式 是 显然 的 ， 第 2 个 不 等 式 可 由 下 列 事实 推出 : 满足 j 天宇 的 诸 项 
Pij(s) 加 起 来 的 总 和 为 1 一 Pi(s)]. 对 于 充分 小 的 s, 我 人 有 1 一 e < Pi(s) < 1, 从 
而 (9.5) 说 明了 Pis 的 一 致 连续 性 . 由 (9.5) 也 推出 , 如 果 P(t) > 0, 那么 在 某 个 
具有 固定 长 度 的 s 区 间 内 Pix(t + s) > 0, 从 而 Pix 或 者 全 等 于 0 或 者 最 终 为 正 的 . 
Ld 
我 们 现在 把 这 个 结果 应 用 于 14.7 节 的 最 小 解 , 假 设 它 是 严格 随机 的 ， 从 而 是 
唯一 的 . 利用 矩阵 记号 ，(9.4) 可 写作 wP(t) = ww， 对 于 相应 的 普通 拉 普 拉 斯 变换 ， 
这 蕴含 
uAIT(N) = uu. (9.6) 


如 果 对 于 某 个 特殊 值 > 0, 向 量 w 满足 (9.6), 那么 预 解 方程 (7.15) 保证 (9.6) 对 
于 所 有 的 入 > 0 都 成 立 , 从 而 保证 (9.4) 对 于 所 有 的 t > 0 都 成 立 . 把 (9.6) 应 用 于 
向 前 方程 (7.6), 我 们 得 到 

Ucp = Uc; (9.7) 


分 量 wkcek 是 有 限 的 ， 但 可 能 是 无 界 的 . 另 一 方面 如 果 4 是 一 个 满足 (9.7) 的 概 
率 向 量 ， 那 么 根据 归纳 法 可 由 (7.12) 推出 ， 对 于 所 有 的 wuAIT((A) < u， 从 而 
aAIT(A) < wu. 但 是 由 于 矩阵 MT(A) 是 严格 随机 的 ， 所 以 两 边 的 分 量 之 和 一 定 相 
等 , 从 而 (9.6) 成 立 . 于 是 我 们 有 

定理 2” 如果 最 小 解 是 严格 随机 的 (从 而 是 唯一 的 ) , 那么 关系 式 (9.2) 对 于 wk > 0 
成 立 ， 当 且 仅 当 存 在 一 概率 向 量 以 , 使 (9.7) 成 立 . 

特别 地 , 这 兹 含 (9.7) 的 解 u 是 唯一 的 . 
概率 解释 ”为 了 使 概念 确定 起 见 , 我们 考虑 最 简单 的 情形 , 即 转移 概率 为 py 的 离 
散 链 是 遍历 的 情形 . 换 句 话 说 , 我 们 假设 存在 一 个 严格 正 概 率 向 量 ae = (a1, az,…)， 
使 得 ap = a, 且 当 n 一 oo 时, pM 一 ak. 于 是 显然 可 知 , 如 果 = 开 akcil < oo 
那么 分 量 为 uk = akcE1/0 的 概率 向 量 满足 (9.7), 而 当 o = co 时 , 解 不 存在 . 

于 是 直观 上 很 明显 , 我 们 的 过 程 中 的 转移 与 矩阵 为 P 的 离散 马尔 可 夫 链 中 的 
转移 是 一 样 的 , 但 是 它们 的 时 间 是 不 同 的 . 为 了 确定 起 见 ， 我 们 考虑 一 个 特殊 状态 
并 把 它 标 以 指标 0. 在 0 处 的 逐次 逗留 时 间 与 离开 的 时 间 相 互 交替 , 在 离开 的 时 间 
内 系统 处 于 诸 状态 ; > 0. 逗留 于 状态 ; 的 次 数 由 P 所 控制 ,它们 的 持续 时 间 依赖 
于 cj. 在 离散 马尔 可 夫 链 中 j 与 0 的 频率 之 比 是 aj/ao, 从 而 oj/ao 是 在 一 个 离开 
时 间 区 间 内 逗留 于 了 的 期 望 次 数 . 由 于 每 次 逗留 的 期 望 持续 时 间 是 1/c;, 所 以 我 们 

言 , 从 长 远 来 看 , 状态 j 与 0 的 概率 之 比 为 jcjl : aoc5l 或 : uo. 

即使 在 Pi(t) 一 0 的 情形 下 也 可 以 使 这 个 论证 成 为 严格 的 . 按照 第 1 卷 15.11 
节 提 到 的 德 曼 (C. Derman) 定 理 , 如 果 PP 导出 一 个 不 可 约 的 常 返 链 ， 那么 存在 一 
个 向 量 oa, 使 得 aP = a, 并 且 a 是 唯一 的 (除了 一 个 乘法 常数 外 ). 这 里 ok > 0， 
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但 是 级 数 污 on 可 能 发 散 . 即使 在 这 种 情形 下 ， 比 oj : ao 也 可 用 上 述 的 相对 频率 
来 解释 ,并且 上 述 论证 一 般 来 讲 也 成 立 .如果 aqkck "< co， 那么 (9.2)~(9.4) 对 于 
与 Qkc 成 比例 的 Uk 成 立 ， 否则 当 t 一 00 时 P(t) 一 0. 有 趣 的 是 , 极限 wx 可 以 是 正 
的 ,即使 离散 链 只 有 零 状态 . 

极限 Pi(oo) 的 存在 性 也 可 以 利用 与 循环 时 间 有 密切 关系 的 更 新 论证 来 得 到 . 
为 了 说 明 怎 样 计算 循环 时 间 和 首次 通过 时 间 的 分 布 ， 我 们 给 状态 编 上 号 码 0，1， 
2,.…， 并 把 0 作为 主 状态 . 我 们 考虑 一 个 新 过 程 ， 此 过 程 在 首次 到 达 0 的 随机 时 
刻 以 前 与 原来 过 程 重合 , 但 以 后 永远 固定 在 0 状态 上 . 换 句 话说 , 新 过 程 是 通过 在 
旧 过 程 中 取 0 为 吸收 状态 得 到 的 . 用 “Pix(t) 表示 修改 了 的 过 程 的 转移 概率 . 于 是 
0Poolt) = 1 . 用 原来 的 过 程 来 说 , "Pio(t) 是 从 i 关 0 出 发 在 时 刻 之 前 首次 通过 0 
的 概率 , "Pik(t) 给 出 一 个 从 i 了 0 向 让 去 0 而 中 间 不 通过 0 的 转移 的 概率 . 从 概率 
上 看 很 明显 , 矩阵 "P(t) 应 该 与 P(t) 满足 相同 的 向 后 方程 和 向 前 方程 所 不 同 的 
是 要 把 co 换 成 0. 我 们 照相 反 的 方向 进行 : 我 们 通过 把 co 变 成 0 来 修改 向 后 方程 
和 向 前 方程 ， 并 证 明 这 个 吸收 状态 过 程 的 唯一 解 具 有 预期 的 性 质 . 

如 果 是 由 了 (A) 的 第 0 列 组 成 的 向 基 , 那么 向 后 方程 说 明 向 量 


M+t+c-cP)é=7 (9.8) 


的 分 量 为 1,0,0,…. 于 是 ?五 (A) 的 向 后 方程 可 通过 把 co 换 成 0 而 得 到 , 从 而 如 果 € 
表示 "(和 ) 的 第 0 列 , 那么 向 量 (9.8) 的 分 量 加 = ==… =0, 但 是 mo =p 关 0. 由 
此 推出 分 量 为 6 = 1ko( 和 ) 一 poJTeo() 的 向 量 满足 带 有 7 = 0 的 (9.8), 因为 XIT(A) 
是 严格 随机 的 这 蕴含 对 所 有 的 ,6 = 0(12.7 节 定 理 3). 因为 "Foo(A) = 1/ 和 , 所 
以 对 大 > 0, 我 们 有 
Do( = Io) Io(N). (939) 
借助 于 (9.8) 中 的 第 一 个 方程 , 我 们 还 可 看 出 
JJ 三 二 二 的 二 SIC 9.10 
Wt DI) (010) 
(9.9) 和 (9.10) 是 有 明显 概率 解释 的 更 新 方程 . 事实 上 ， 设 过 程 从 让 > 0 开始 . 于 
是 "IIo 是 在 时 刻 t 之 前 首次 到 达 0 的 概率 oPkolt) 的 普通 拉 普 拉 斯 变换 ， 从 而 
和 QTDko(A) 是 首次 到 达 0 的 时 刻 的 分 布 Fi: 的 拉 普 拉 斯 变换 . 于 是 (9.9) 说 明 Piolt) 
是 及 与 Poo 的 卷 积 ; 为 使 事件 X(t) = 0 发 生 , 当 且 仅 当 首次 到 达 0 发 生 在 某 个 时 
刻 z<t, 并 且 在 上 一 z 个 单位 时 间 后 系统 又 处 在 0. 
类 似 地 , poyX?11o 表示 一 个 离开 时 间 的 分 布 Fo, 即 连续 两 次 在 0 上 逗留 的 时 
间 间 隔 . 因此 , (9.10) 的 右边 Foo(A) 的 因子 为 (如 果 系 统 最 初 处 于 0) 首次 返回 0 所 
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需要 的 等 待 时 间 . (这 也 就 是 一 个 完全 周期 的 分 布 ,一 个 完全 周期 = 逗留 时 间 加 上 
离开 时 间 , ) 更 新 方程 (9.10) 把 Poo(t) 表示 为 在 0 上 逗留 的 时 间 超过 t 的 概率 与 
在 时 刻 z < t 首次 返回 后 X(t) = 0 的 概率 之 和 . 如 果 0 是 常 返 的 , 那么 根据 更 新 定 
理 , (9.10) 蕴含 


Poo(%) = 


和 (9.11) 


其 中 几 是 离开 时 间 的 平均 持续 时 间 , cj + 是 一 个 完全 周期 的 平均 持续 时 间 . 


14.10 习 题 


1， 在 更 新 方程 (1.3) 中 , 令 F(t) = g(t) = et /TCD), 于 是 


1 


YN = KF 


(10.1) 
利用 部 分 分 式 方法 证 明 : 对 于 整数 ?p， 
1 
v(t) = i De (10.2) 


其 中 Qk 一 rek/P, 认 =-1. 

2， 即将 到 达 一 个 服务 员 那 里 的 顾客 流 构成 一 个 参数 为 a 的 泊 松 过 程 , 每 个 顾客 所 需要 的 
服务 时 间 的 分 布 G 的 拉 普 拉 斯 变换 为 7. 设 H(t) 是 一 个 顾客 所 需要 的 服务 时 间 不 超 
过 t+ 且 在 这 个 期 间 内 没有 新 顾客 到 达 的 概率 . 证 明 : H 是 一 个 拉 普 拉 斯 - 斯 蒂 尔 切 斯 
变换 为 Y(A + a) 的 亏损 分 布 . 

3。 失去 的 顾客 . 假设 上 例 中 的 服务 员 在 时 刻 0 是 空闲 的 . 用 U(t) 表示 直到 时 刻 t 所 有 到 
达 的 顾客 都 看 到 服务 员 为 空闲 的 概率 . 推导 U 的 更 新 方程 , 并 证 明 U 的 普通 拉 普 拉 斯 
变换 w 满足 线性 方程 


EE 1 1- YA+o) 


a 
Frato Gro +Xrar +e). 


为 等 待 在 一 忙 期 中 到 达 的 第 一 个 顾客 所 需 的 平均 时 间 是 
ol+a ll— Yo) 


提示 : 利用 上 题 . 


4 ( 续 ) 利 用 6.13 节 的 习题 17 所 述 的 方法 , 把 U 看 作 是 延迟 了 的 可 终止 更 新 过 程 总 寿命 
的 分 布 来 解 上 题 . 


@ 当 p=n 和 p=n/2 时 , 分母 的 根 是 相同 的 , 但 是 解 是 完全 不 同 的 . 这 说 明 当 多 是 无 理 函数 时 ， 
流行 的 “按照 分 母 的 根 进行 的 展开 " 需要 谨慎 . 
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10. 


Ji 
12. 


13, 
14. 


.如 果 下 的 期 望 为 yp， 方差 为 2?， 并 且 cp < 1， 那么 忙 期 方程 (4.1) 的 解 的 方差 为 


(oz + cp)/(1 一 cj 


.在 144 节 例 (b) 中 被 延迟 的 汽车 总 数 的 母 函 数 是 es 其 中 


(8) = sp(c — cy(s)). (10.3) 


. 证 明 : 如 果 ” 是 一 正常 分 布 的 拉 普 拉 斯 变换 ， 那 么 (10.3) 的 解 % 是 一 个 可 能 为 亏损 


的 分 布 的 母 函 数 . 为 使 后 者 是 正常 分 布 ， 当 上 且 仅 当 FF 的 期 望 4< 1/c 


,在 14.5 节 例 (a) 的 吸收 壁 过 程 中 , 用 F(t,z) 表示 (从 z 开始 ) 吸收 将 在 时 间 t 内 发 


生 的 概率 . (于 是 F 表示 过 程 总 寿命 的 分 布 ，) 证 明 : 1 -下 的 普通 拉 普 拉 斯 变换 为 
Kr(z,y) 在 0<y < co 上 的 积分 . 证 明 : F 的 拉 普 拉 斯 - 斯 蒂 尔 切 斯 变换 为 e-Y5X=， 
这 和 它 必 须 满足 微分 方程 (5.9) 这 个 事实 相符 合 . 


从 (5.7) 出 发 来 证 明 : 在 任 一 区 间 上 的 一 般 扩散 方程 (5.19) 的 格林 函数 一 定 具 有 形式 


SDPY) ,ey 

| wo < 
MEN) aaew >, 9 

WO) * “> 


其 中 &、 和 从 分 别 是 齐 次 方程 
Ne- iaw' -wp'=0 (0 


的 在 左边 界 上 有 界 和 在 右边 界 上 有 界 的 解 . 如 果 (*) 没有 有 界 解 ， 那 么 除 一 乘法 常数 
处 , 6 和 mh 是 确定 的 , 且 乘 法 常数 可 以 被 吸引 到 W 中 . (否则 必须 加 上 适当 的 边界 条 
件 . ) 
证 明 : 为 使 由 (10.4) 和 (5.5) 确定 的 wa 满足 微分 方程 (5.19), 当 且 仅 当 W 是 朗 斯 基 
(Wronsky) 行列 式 

W(y) = [Wm(Y) — & (WD) mWJa/2. (10.5) 
解 6 和 从 一 定 是 单调 的 , 从 而 W(y) = 0. 
( 续 ) 对 于 < y, 从 z 出 发 首次 通过 y 的 时 刻 的 拉 普 拉 斯 变换 为 &x(z)/&(). 对 > 从 
变换 为 mh(z)/m(y). 
证 明 : 14.5 节 中 对 扩散 过 程 所 述 的 方法 同样 适用 于 一 般 的 生 灭 过 程 .@ 
修改 14.6 节 例 (a), 使 之 适用 于 a > 1 个 服务 员 的 情形 . (明确 地 计算 出 那 a 个 常数 是 
很 麻烦 的 ， 所 以 不 建议 读者 这 样 做 . ) 
在 14.6 节 例 (b) 中 由 微分 方程 直接 证 明 : 忙 期 的 期 望 为 Een 方差 为 rr 
半 马 尔 可 夫 过 程 1, 2,… 上 的 半 马 尔 可 夫 过 程 与 马尔 可 夫 过 程 的 不 同 之 处 , 在 于 逗留 时 
间 可 以 依赖 于 终点 状态 ,假定 在 时 刻 7 进入 状态 ?由 于 跳 到 K 而 使 逗留 时 间 在 7 十 
前 结束 的 概率 是 Fix(t). 那么 并 x Rix(t) 是 逗留 时 间 的 分 布 , pik = Fix(o0) 是 跳 到 上 的 


@ 关于 细节 和 边界 条 件 见 W. Feller, The birth and death process as diffusion process, Journal 


Mathématiques pures Appliquées, vol. 38 (1959) pp. 301-345 . 
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概率 . 用 Pix(t) 表示 已 知 在 时 刻 + 进入 状态 i 时 ,在 时 刻 上 + 7 处 于 大 的 概率 . 推导 一 

个 类 似 于 科 尔 莫 苞 罗 夫 向 后 方程 的 方程. 利用 不 言 自 明 的 记号 , 变换 了 的 形式 为 
HN) =70)+ ENIO), 

其 中 Y(A) 是 元 素 为 [1 一 避 ; pin (和)]/ 和 的 对 角 甜 阵 对 于 Fin(t) = Pix(1 一 ee), 这 化 

成 向 后 方程 (7.5). 14.7 节 最 小 解 的 构造 仍然 有 效 .@ 


@ 关于 细节 见 W. Feller, On semi-Markov processes, Proc. National Acad. of Sciences, vol. 
51 (1964) pp. 653-659. 半 马 尔 可 夫 过 程 是 P. 列 维 和 史密斯 ( W. L. Smith ) 引进 的 , 毕 克 (R- 
Pyke ) 作 了 进一步 的 研究 . 


第 15 章 特征 函数 


本 章 讨论 特征 函数 的 基本 理论 , 它 与 第 6、7、9~14 章 完全 独立 . 严密 的 傅 里 叶 
分 析 推 迟到 第 19 章 再 讨论 . 


15.1 定义 , 基本 性 质 


非 负 整 值 随机 变量 X 的 母 函 数 是 定义 在 0 < s < 1 上 的 函数 E(sx)( 即 sx 的 
期 望 ) 正如 在 第 13 章 中 所 说 明 的 那样 , 只 要 利用 变量 替换 s = e-*, 我 们 在 研究 任 
意 非 负 随机 变量 时 , 也 可 以 使 用 上 述 有 用 的 工具 . 这 些 变换 的 用 处 多 半 来 自 于 乘法 
性 质 sfy = sr8y 和 ext+w = eye 具有 纯 虚 自 变量 的 指数 函数 ， 即 对 于 实 
数 z, 由 


er = cos6z 十 isinCz (1.1) 


(其 中 5 是 一 实 常数 , 记 = -1) 所 定义 的 函数 也 具有 这 个 性 质 . 因为 这 个 函数 是 有 界 
的 ， 所 以 在 任何 情况 下 它 的 期 望都 存在 . 用 E(exx) 代替 母 函 数 可 以 提供 一 个 强 有 
力 的 普遍 适用 的 工具 ,但 它 是 以 引进 复 值 函 数 和 复 值 变量 为 代价 而 获得 的 . 只 是 应 
注意 到 那些 独立 随机 变量 仍然 局 限于 实 直线 (或 者 以 后 局 限于 RR). 

所 谓 复 值 函 数 w = +iu, 指 的 是 对 实数 = 定义 的 实 函数 对 “和 v 期 望 E(w) 
是 Eu)+ 还 (w) 的 缩写 . 我 们 照例 把 共 包 函 数 记 作 贡 = ~ 一 io, 把 绝对 值 记 作 |wl( 即 
lw = wm = 局 十 塌 ). 期 望 的 基本 性 质 仍然 成 立 ， 只 是 中 值 定理 需要 说 明 ， 如 果 
lol < a 那么 E(w)| < a. 事实 上 , 根据 施 瓦 兹 不 等 式 ， 


[EWE = (E(wW) + (E(W))? < E(w) + 了 (oz) = E(hoP2) < o2. (1.2) 


当 且 仅 当 对 偶 (i, Vi) 与 对 偶 (V2,V2) 是 相互 独立 时 ， 称 两 个 复 值 随机 变量 W; = 
Ui + iVi 是 独立 的 . 把 复数 分 解 为 实 部 和 虚 部 ， 就 可 看 出 乘法 性 质 E(WiW2) = 
E(W1)E(Wz) 仍然 成 立 . (这 个 公式 说 明了 复数 符号 的 优点 .) 有 了 这 些 预 备 知识 , 我 
们 就 可 以 按 下 列 方式 定义 一 个 与 母 函 数 类 似 的 概念 

定义 设 久 是 一 个 概率 分 布 为 下 的 随机 变量 、 (或 的 特征 涧 数 是 对 实数 《 由 


v0= 三 seefazj=vGO+iG (13) 
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定义 的 函数 p， 英 中 
u(C) = [see .F{dz}, v(C)= 太吉 Cz. F{dz}. (1.4) 
对 于 具有 密度 了 的 分 布 P， 自然 有 
eg = ofr (5) 


术语 解释 ”在 普遍 采用 的 传 里 叶 分 析 术 语 中 ，y 是 F 的 傅 里 时 - 斯 蒂 尔 切 斯 
(Fourier-Stieltjes) 变换 . 这 样 的 变换 是 对 所 有 有 界 测度 定义 的 , 术语 “特征 函数 ” 强 
调 测度 具有 单位 质量 .( 其 他 的 测度 不 具有 特征 函数 .) 另 一 方面 , 形 如 (1.5) 的 积 
分 出 现在 许多 方面 ,我 们 认为 (1.5) 确定 了 7 的 普通 传 里 叶 变换 ( 当 f 存在 时 ) 下 
的 特征 函数 是 密度 f 的 普通 传 里 叶 变换 , 但 是 术语 傅 里 叶 变换 也 适用 于 其 他 函数 . 
Pp 

为 了 便于 引用 起 见 , 我 们 列举 特征 函数 的 一 些 基本 性 质 . 
引 理 1 设 p = 二 ut+iv 是 一 个 分 布 为 下 的 随机 变量 义 的 特征 函数 ， 则 

(a) p 是 连续 的 ; 

(b) p(0) = 1, 并 且 对 于 所 有 的 4,|p(O| < 1 

(c) aX + b 的 特征 函数 为 


Beext9) = eolag)， (L6) 


特别 ,本 = 4 一 jv 是 一 导 的 特征 函数 . 
(d) v 是 偶 函 数 ，v 是 奇 函 数 . 为 使 特征 函数 是 实 值 的 . 当 上 且 仅 当 已 是 对 称 的 . 
(e) 对 于 所 有 的 〈， 
0 < 1—u(20) < 4(1— wu(O)). (1.7) 
(关于 变形 见习 题 1 ~ 习题 3. ) 
证 (a) 注意 到 lek=| =1, 从 而 
le(2+h) 一 ez| = eic — 1|. (1.8) 
右边 与 > 无 关 , 且 对 于 充分 接近 于 0 的 h, 它 是 任意 小 的 . 于 是 p 实际 上 是 一 致 连 
续 的 . 由 中 值 定理 可 知 , 性 质 (b) 是 显然 的 . (c) 不 需要 加 以 说 明 . 为 了 证 明 (d), 我 
们 提前 使 用 下 面 的 事实 : 不 同 的 分 布 有 不 同 的 特征 函数 . 于 是 为 使 p 是 实 的 , 当 且 


仅 当 w=, 即 和 一 X 有 相同 的 特征 函数 . 但 是 , 这 样 X 和 -X 有 相同 的 分 布 ， 
从 而 是 对 称 的 . 最 后 为 了 证 明 (e), 考虑 初等 的 三 角 关 系 式 


1 一 cos26z = 2(1 一 cos2(z) < 4(1 — cos6z). (1.9) 
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它 是 成 立 的 , 因为 0 < 1 + cos(z < 2. 取 期 望 我 们 就 得 到 (1.7). > 
现在 考虑 两 个 分 布 为 及 , ,特征 函数 为 pl, pa 的 随机 变量 XX1,，X2. 如 果 XI 

和 Xo 是 独立 的 , 那么 指数 函数 的 乘法 性 质保 证 了 
E(e<Cn+X3)) = E(e<X:)p(e*). (1.10) 


这 个 简单 的 结果 经 常 被 用 到 ,因此 我 们 把 它 写作 
引 理 2 卷 积 甩 交配 的 特征 西数 为 p192. 

换 句 话 说 ， 两 个 独立 随机 变量 之 和 Xi + X2 对 应 于 它们 的 特征 函数 的 乘积 
pig2. © 

如 果 Xs 的 分 布 和 X1 的 分 布 相同 , 那么 和 Xi 一 X2 表示 一 个 对 称 变量 ( 见 5.5 
节 ). 因此 我 们 有 
系 “|e|? 是 对 称 分 布 " 玉 的 特征 函数 . 

下 列 引 理 刻 划 了 算术 分 布 的 特征 . 

引 理 3 如 果 夭 0, 那么 下 列 3 个 陈述 是 等 价 的 : 

(a) P(A) = 了 1 

(b) p 有 周期 和， 即 对 于 所 有 的 5 和 n, p(C 十 nA) = p(C); 

(ce) F 的 所 有 的 增 点 都 在 0, 士 hi; 土 2h，… 上 ， 其 中 hh 二 2x/ 入 . 

证 ”如果 (c) 是 正确 的 , 并 且 FF 对 nh 赋予 重 晤 pn, 那么 
Pn(b) = Ppnei™™. 
这 个 函数 有 周期 2r/ 和 从 而 (c) 蕴含 (b), 而 (b) 又 比 (a) 强 

反之 , 如果 (a) 成 立 , 那么 非 负 函数 1 - cos 和 z 的 期 望 等 于 0, 只 有 当 在 下 的 
每 个 增 点 z 上 都 有 1 - cos Xz = 0 时 上 述 结论 才 可 能 成 立 . 于 是 集中 于 2r/ 入 加 
倍数 上 ,从 而 (c) 成 立 . 

这 个 引 理 包含 了 集中 于 原点 上 的 分 布 这 一 极端 情形 . 于 是 对 于 所 有 的 ee 
= 1， 从 而 每 个 数 都 是 yp 的 周期 . 一 般 说 来 , 如 果 入 是 2 的 周期 , 那么 所 有 的 倍数 
士 入, 士 2 和 ,… 也 是 p 的 周期 , 但 是 对 于 非常 数 周期 函数 p, 存在 一 个 最 小 正 周期 , 这 
称 为 真 周期 . 类 似 地 ,对 于 算术 分 布 ,存在 一 个 使 性 质 (c) 成 立 的 最 大 的 正 的 h， 
这 称 为 的 步 长 . 由 引 理 3 推 知 , 步 长 h 和 周期 和 通过 Ah = 2r 相 联 系 . 于 是 除 
非 对 于 所 有 的 《 关 0,w(C) 关 1, 或 者 p(C) 三 1, 否则 就 存在 一 个 最 小 的 入 > 0, 使 得 
e(A) =1, 但 对 0<¢C<A,p(O) #1. 

所 有 这 些 结果 可 以 用 更 一 般 的 形式 叙述 . 代替 2(A) = 1, 只 假设 jp( 和 A)| = 1， 
于 是 存在 一 个 实数 b, 使 得 p( 和 ) = e**， 我 们 可 以 把 上 述 结果 应 用 于 特征 函数 为 


外 其 逆 是 错误 的 , 因为 在 2.4 节 (e) 和 3.9 节 的 习题 1 中 已 证 明 , 在 某 些 特殊 情形 下 , 2 个 相关 变量 
之 和 可 以 有 分 布 所 诡 F2, 从 而 有 特征 函数 p192- 
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9p(C)eri 的 变量 X 一 b, 此 特征 函数 在 4 = 和 时 等 于 1. 这 个 特征 函数 的 每 个 周期 
自然 是 |p| 的 周期 于 是 我 们 证 明了 
引 理 4 只 有 下 列 3 种 可 能 性 : 

(a) 对 于 所 有 的 《天 0,|p(A)| < 1 

(b) jp(A| = 1,， 且 对 于 0<5< Xp(6)| < 1. 在 这 种 情形 下 , |p| 有 周期 和 ,并 
且 存 在 一 个 实数 b, 使 得 F(z 十 6b) 是 步 长 为 有 = 2/ 和 的 算术 分 布 . 

(©) 对 于 所 有 的 ,|p(C)| = 1. 在 这 种 情形 下 ， gO) 二 eib6, 忆 集中 于 点 b 上. 
例 设 忆 集中 于 0 和 1 上 ， 并 对 每 点 赋 子 概率 3 . 于 是 下 是 步 长 为 1 的 算术 分 


布 , 它 的 特征 函数 p() = (L +ex)/2 的 周期 是 2 | F (e+ 3) 集中 于 士 上 ， 
它 的 步 长 为 十， 它 的 特征 函数 cos《/2 的 周期 为 47 
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为 了 便于 参考 引用 起 见 ， 我 们 给 出 10 个 常用 密度 的 特征 函数 表 ， 并 叙述 推导 
它们 的 方法 
关于 表 1 的 注 (1) 正太 省 度 . 如 果 我 们 不 怕 复 杂 的 积分 ,那么 根据 代 换 y = = 一 i， 
这 个 结果 是 显然 的 , 为 了 在 实数 域 上 证 明 此 分 式 , 利用 微分 和 分 部 积分 证 明 y/(C) = 
一 6p(), 因为 p(0) = 1 所 以 inp(C) = -了 2， 这 与 断言 相同 . 

(2) 和 (8) 均匀 分 市 (2) 和 (3) 中 的 计算 是 显然 的 , 2 个 分 布 的 不 同 之 处 只 是 
位 置 参数 , 特征 函数 之 间 的 关系 式 说 明了 法 则 (1.6) 

(4) 三 角形 分 市 利用 分 部 积分 作 直接 计 算是 很 容易 的 ， 另 外 ,注意 到 我 们 的 
三 角形 密度 是 在 -了 a < z < 3a 上 的 均 灸 密度 与 其 本 身 的 卷 积 并 考虑 到 (3), 可 知 


22 
它 的 特征 函数 是 (Em 
(5) 这 是 通过 把 反 演 公式 (3.5) 应 用 于 三 角形 密度 (4) 而 得 到 的 ， 又 见习 题 4 
这 个 公式 具有 重大 的 意义 ， 因 为 许多 传 里 叶 分 析 证 明 依 玖 于 利用 一 个 在 有 限 区 间 
外 等 于 0 的 特征 函数 
(6) [密度 . 利用 代 换 y = z(1 - i). 如 果 有 人 仍 喜 欢 在 实数 城中 进行 讨论 ， 屠 
么 可 把 se 展 为 级 数 .关于 特征 函数 , 我们 用 这 种 方法 得 到 


全 {ere T(tt) yn -N_icyn 
页 光电 (iC) nt 过 6 -0 


这 是 实际 上 (1 一 i)-! 的 二 项 级 数 ,对 于 特殊 情形 t 一 1( 指 数 分 布 ), 计算 可 以 通过 
重复 利用 分 部 积分 公式 来 进行. 利用 递 推 方法 可 知 , 当 + 为 整数 时 ,这 都 是 正确 的 . 
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(7) 双 侧 指数 分 布 可 通过 指数 分 布 的 对 称 化 获得 ， 从 而 特征 函数 可 由 上 = 1 的 
(6.1) 推出 . 重复 利用 分 部 积分 公式 , 直接 验证 是 不 难 的 . 

(8) 柯 西 分 布 . 这 个 公式 也 可 以 利用 反 演 公式 (3.5) 由 上 一 公式 推出 . 这 个 公式 
的 直接 验证 是 留 数 计算 中 的 一 个 标准 练习 . 

(9) 贝 塞 尔 密度 . 这 是 在 13.3 节 例 (d) 中 导出 的 拉 普 拉 斯 变换 的 储 里 叶 形 式 ， 
可 以 用 同样 的 方法 证 明 . 

(10) 双 曲 余弦 分 布 . 相应 的 分 布 函数 是 F(z) = 1 一 2n-1arctane*. 表 15-1 第 
10 号 的 公式 不 很 重要 , 但 是 因为 它 给 出 了 一 个 “ 自 反 对 偶 ”: 密度 和 它 的 特征 函数 
的 不 同 之 处 仅 在 于 尺度 参数 ， 而 有 一 定价 值 ，( 正 态 分 布 是 这 种 现象 的 最 好 例子 . ) 
为 了 计算 特征 函数 ,把 密度 展 成 几何 级 数 


让 -Deer 
TT 


表 15-1 
-了 名称 密度 区 间 “特征 丙 数 

1 正 态 分 布 志 " 3 -oo<z<o et 
2 均 义 分 : 0<z<a 2 1 
3 均匀 分 去 四 <a Ee 
4 于 分 布 。 (1- 3 ll<a 2 
Ti 2 { 1- ,<e 

0 MK >a 
6 工分 布 mm" = z>0，t>0 RE 
7 双 个 指 数 分 布 ze I -oo<z<oo 二 
8 柯 本 分布 lpia <z<oot>0 -tl 
9 贝 塞 尔 分 布 ee(z) z>0，t>0 -iX- VU- 
10 。。 双 埋 人 站 分 布 二 -oo<z<oo te 


把 表 15-1 第 7 号 的 密度 用 于 每 一 项 , 我 们 就 得 到 特征 函数 的 典型 部 分 分 式 展开 式 . 
[a 
@ coshz = #(e” +e-®). 
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(关于 进一步 的 例子 , 见习 题 5~ 习题 8. ) 

回 到 一 般 理论 , 我 们 给 出 一 个 从 已 知 特征 函数 构造 新 特征 函数 的 方法 . 原理 是 
极 简单 的 , 但 是 例 (b) 说 明 它 可 以 用 来 避免 宛 长 的 计算 . 
引 理 。” 设 醒 ,两 ,是 特征 函数 为 po,pl,… :的 概率 分 布 . 

如 果 pk >0 且 2pk=1, 那么 混合 


U= 》 mx 到 (2.1) 
是 一 个 特征 函数 为 

w= pkek (2.2) 
的 概率 分 布 . 
例 (a) ”随机 和 . 设 X1,X2,… 是 具有 共同 分 布 已 和 特征 函数 p 的 独立 随机 变量 . 
设 NN 是 一 个 母 函 数 为 P(s) = 于 pksk 的 整 值 随机 变量 ,并且 与 X; 独立 . 那么 随机 
和 Xi 十 … 十 XN 有 分 布 (2.1)( 其 中 F = FM), 相应 的 特征 函数 是 

w(¢) = P(p(O)). (2.3) 

最 值得 注意 的 情形 是 复合 泊 松 分 布 的 情形 . 此 处 pk = e-itt/k!, 并 且 


w(C) = et+ttp(O. (2.4) 


普通 的 泊 松 分 布 表示 FF 集中 于 点 1 上 即 (5) = ei 时 的 特殊 情形 ， 
例 (b) 加 多 边 形 .我 们 从 表 15-1 第 5 号 知道 


2) 1-K, sl 
92(9) = { 0, [cz1 (2.5) 


是 一 个 特征 函数 . 如 果 a1,… ,a 是 任意 正 数 , 那么 混合 


w(O)=p1p (&) 十 … 十 pn (£&) (2.6) 


是 一 个 偶 特 征 函数 ， 它 在 页 55 上 的 图 形 是 一 个 凸 多 边 形 ( 见 图 15-1). 事实 上 ,不 
失 一 般 性 , 设 a1 < oz < … < an， 在 区 间 0 < ¢ < aa 上， w 的 图 形 是 一 条 狸 
率 为 - (中 十 …+ 下 ) 的 直线 及 在 a 和 oa 之 间 项 pi/o 消失 了 ， 等 等 ， 一 
直到 在 on-! 和 an 之 间 图 形 与 一 条 斜率 为 -pn/an 的 直线 自重 合 为 止 , 因此 , 在 
Tcs 上 图 形 是 由 n 条 具有 递减 作 率 的 线 朋 和 5 轴 上 的 线段 本 55 组 成 的 多 边 形 , 
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容易 看 出 , 每 个 具有 这 种 性 质 的 多 边 形 可 以 用 (2.6) 表示 (n 条 边 与 w 轴 相 交 于 点 
pn pn 十 pn-1 ,pn 十 … 十 D1 = 1). 我 们 断言 , 每 个 满足 w(0) = 1 且 在 006 上 的 
图 形 是 西 多 边 形 的 偶 函 数 由 > 0 是 一 个 特征 函数 . 

简单 的 取 极 限 将 导致 著名 的 波 利 亚 准则 [15.3 节 例 (b)] 并 且 揭 示 了 它 的 自然 来 
源 . 即使 现在 这 个 特殊 的 准则 也 可 导致 意 想不到 的 值得 注意 的 结果 . 


图 151 例 (b) 的 图 解 


一 些 意外 的 现象 


我 们 稍微 离开 主题 , 引入 一 些 具 有 意外 的 有 趣 的 性 质 的 特殊 类 型 特征 函数 . 我 们 从 一 
个 关于 算术 分 布 的 预备 性 陈述 开始 . 

假设 分 布 G 集中 于 某 个 固定 数 x/ 工 > 0 的 倍数 nr/ 上, 点 nr/ 的 概率 为 pn: 此 处 
n= 0, 士 1,…. 特征 函数 7 为 ， 


Ho 
70)= pro/ (2.7) 


n=— 


并 且 具 有 周期 2L. 通常 不 容易 求 出 Y 的 明显 表达 式 , 反而 容易 用 特征 函数 7 来 表示 概率 
Pr. 实际 上 , 用 e "“ 作 乘 以 (2.7). 概率 pn 作为 周期 函数 et" "</Z 的 系数 出 现 , 除 n 二 + 
外 , 此 函数 在 一 L, 工 上 的 积分 等 于 0. 由 此 推出 


= 站 100/ac "=0,+1,.… (2.8) 
元 ， ,二 


我 们 现在 提前 使 用 19.4 节 中 定理 1 的 下 列 准则 : 设 7 是 一 个 周期 为 工 > 0 的 连续 函 
数 , 并 且 被 正规 化 Y(0) = 1. 那么 , Y 是 一 个 特征 函数 ， 当 且 仅 当 (2.8) 中 所 有 的 数 pr > 0. 在 
这 种 情形 下 ，{pr} 自然 是 一 个 概率 分 布 ， 且 (2.7) 成 立 . 
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例 (ce) ”选取 一 个 任意 的 工 > 1, 设 Y 是 一 个 周期 为 2L 的 函数 , 当 |4| < 工 时 此 函数 与 
(2.5) 的 特征 函数 yp 重合. 那么, Y 是 一 个 集中 于 r/ 的 倍数 上 的 算术 分 布 的 特征 函 数 . 事 
实 上 , 由 对 称 性 ，(2.8) 化 为 


p= rcsrsc/rac = (Ooosrac/ra. (29) 


通过 简单 的 分 部 积分 , 可 证 明 


po=1/(2L), pr = Lai’(1—cosrn/L)>0 r@#0. (2.10) 


于 是 我 们 得 到 了 一 整 族 周期 特征 函数 , 它们 的 图 形 由 一 个 底 边 为 2nL-1<z<2nL+1 的 
直角 三 角形 的 周期 性 重复 及 《 轴 在 它们 中 间 的 部 分 组 成 ( 见 图 15-2). (我 们 将 在 19.5 节 中 
在 泊 松 求 和 公式 这 个 更 一 般 的 背景 下 再 来 讨论 这 个 例子 . ) 


-L -LI 0 1L 2 3L 4 
图 15-2 例 (c) 的 图 解 


奇特 性 质 (i) 两 个 不 同 的 特征 夯 数 可 以 在 有 限 区 间 一 aa 内 重合 ， 例 (b) 或 例 (c) 的 这 
个 明显 推论 说 明了 特征 函数 和 母 函 数 (或 拉 普 拉 斯 变换 ) 之 间 的 明显 差别 . 

(ii) 3 个 概率 分 布 之 间 的 关系 式 到 甩 = FP 友 杞 并 不 名 会 ? = 丽 实际 上 ， 对 于 由 
(2.5) 定义 的 p, 以 及 任意 2 个 在 区 间 一 I,I 内 重合 的 特征 函数 , 我 人 有 pypi = pyp2. 特别 ， 
对 于 例 (c) 的 每 个 周期 特征 函数 , 我 人 有 yp? = p7. 

(ii) 更 出 乎 意料 的 是 存在 两 个 实 的 特征 函数 pi 使 得 处 处 有 |pa| = pl > 0. 事实 上 , 考 
虑 具有 工 = 1 的 例 (c) 中 的 特征 函数 Y. 它 的 图 形 由 图 15-3 的 实 折线 表示 . 我 们 看 到 , 相应 
的 分 布 对 原点 赋予 重量 1/2. 消去 这 个 原子 并 使 其 他 原子 的 质量 加 倍 ， 就 得 到 特征 函数 为 
27 一 1 的 分 布 . 它 的 图 形 


图 15-3 奇特 性 质 (ii) 的 图 解 


@ 统计 学 家 和 天 文学 家 有 时 提问 , 给 定 的 分 布 是 否 有 正 态 分 量 . 这 个 问题 是 有 意义 的 ， 因 为 正 态 分 布 
gu 的 特征 函数 没有 零点 ， 因 此 9ia 友 五 二 Ma 六 Fz 蕴含 pl = 92， 从 而 根据 唯一 性 定理 ,蕴含 
=F. 
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由 在 十 则 振动 的 斜率 为 +2 的 折线 给 出 . 由 此 推出 , 27 ( 3 ) 一 1 是 一 个 特征 本 数 ,其 图 


形 可 通过 在 ?+ 的 图 形 中 每 隔 一 个 三 角形 把 一 个 三 角形 沿 着 ¢ 轴 反 射 而 得 到 (图 15-3). 因 
此 ,9(O) 和 27 (¥) 一 1 是 2 个 实 的 特征 函数 , 它们 只 是 符号 有 所 不 同 .( 关 于 图 15-2 的 类 
似 构造 ,见习 题 9. ) 


15.3 ”唯一 性 , 反 演 公 式 
设 和 G 是 两 个 特征 函数 为 p 和 的 分 布 , 于 是 
+o0 
eco(O = 人 sce-9Ptdz- (3.1) 

关于 G{dc} 积分 , 我们 得 到 

fv0et0 = xe-drtas). (3.2) 
这 个 恒等式 通称 为 心室 瓦尔 关 条 式 (但 是 , 它 可 以 写成 许多 等 价 的 形式 ,我们 将 在 
第 19 章 中 再 来 讨论 ). 


我 们 将 只 利用 G = mM。 是 密度 为 an(az) 的 正 态 分 布 这 一 特殊 情形 . 它 的 特征 
函数 为 Y(C) = V2xn(C/a), 从 而 (3.2) 旦 形式 


/ e-itg(C)an(aC)dc = V 玩 人 (5:) F{dz}, (3.3) 
此 式 和 
遍 广 voicek = bn (: 2) F{dz} (3.4) 
相同 . 


从 这 个 恒等式 可 以 得 出 许多 结论 . 首先 , 右边 是 下 与 一 个 期 望 为 0, 方差 为 o2 
的 正 态 分 布 的 卷 积 Ms。 克 F 的 密度 . 于 是 在 原则 上 当 9p 已 知 时 , 我 们 就 可 对 所 有 的 
4 计算 出 分 布 名 。 友 下 . 但 是 , Ro 的 方差 为 a2, 从 而 当 a 一 0 时 go 妈 忆 一 三. 由 此 
推出 , P 唯一 地 确定 了 分 布 F. 因此 , 我 们 有 重要 的 
定理 1 不同 的 概率 分 布 具 有 不 同 的 特征 函数 

假设 已 给 出 一 个 特征 函数 为 p 的 概率 分 布 Fn 的 序列 , 使 得 对 于 所 有 的 《， 
gn(《) 一 9%(9). 根据 8.6 节 的 选择 定理 , 存在 一 个 序列 {nx} 和 一 个 可 能 为 亏损 的 分 
布 ,使 得 Fn。 一 下. 我 们 把 (3.4) 应 用 于 对 偶 (pni, Fn), 并 令 大 一 co. 取 极 限 我 
们 又 得 到 恒等式 (3.4)[ 左 边 是 根据 控制 收敛 定理 , 右边 是 由 于 被 积 函 数 n((t -x)a) 
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在 无 穷 远 处 等 于 0]. 但 是 我 们 已 经 看 到 ,对 于 给 定 的 p, 恒等式 (3.4) 唯一 地 确定 
了 下 ,从 而 极限 忆 对 于 所 有 的 收敛 子 序列 {Fns} 来 说 都 是 相同 的 . 于 是 我 们 有 
引 理 设 Fi 是 一 个 特征 函数 为 pn 的 概率 分 布 . 如 果 对 于 所 有 的 C,pn(() 一 p(C)， 
那么 存在 一 个 可 能 为 亏损 的 分 布 局 , 使 得 FF, 一 下. 

例 (a)” 设 U 是 一 个 具有 实 的 非 负 特征 函数 w 的 概率 分 布 . 设 玉 = Um, 因此 
Ppn(6) = w"(C). 于 是 除了 使 得 w(C) = 1 的 诸 点 外 , pn(5) 一 0. 根据 15.1 节 的 引 理 
4, 这 个 集合 由 形 如 士 nA 的 所 有 的 点 组 成 ,其 中 入 > 0 是 一 个 固定 的 数 . 由 此 推出 
(3.4) 的 左边 恒 等 于 0, 从 而 U"* 一 0. 根据 对 称 化 ,我 们 断言 ， 对 于 不 全 中 于 0 上 
的 任 一 概率 分 布 G,G"* 一 0. > 

下 列 定理 在 本 质 上 说 明了 , 极限 F 是 亏损 的 ， 当 且 仅 当 极 限 p 在 原点 处 是 不 
连续 的 . 
定理 2 (连续 性 定理 ). 一 个 由 概率 分 布 组 成 的 序列 { 甩 } 正常 收敛 于 一 个 概率 分 
布 , 当 且 仅 当 它们 的 特征 函数 序列 处 处 收敛 于 极限 ,并且 p 在 原点 的 某 个 令 域 
内 是 连续 的 . 

在 这 种 情形 下 ,yp 是 瓦 的 特征 函数 , (因此 ,yp 是 处 处 连续 的 ， 并且 收 敛 pn 一 yp 
在 每 个 有 限 区 间 内 是 一 致 的 . ) 

证 (a) 假设 FE 一 下, 其 中 下 是 一 个 正常 概率 分 布 . 根据 8.1 节 中 的 系 , 特征 函 
数 pn 收敛 于 FF 的 特征 函数 p, 这 个 收敛 在 有 限 区 间 内 是 一 致 的 . 

(b) 假设 对 于 所 有 的 ,9pr(5) 一 p(0). 根据 上 一 引 理 , 极限 F = lim Fn 存在， 

恒等式 (3.3) 可 以 应 用 . 左边 是 有 界 函 数 e-“tp(5) 关于 一 个 期 望 为 0、 方差 为 a-? 的 
正 态 分 布 的 期 望 . 当 a 一 co 时 ,这 个 分 布 集 中 于 原点 附近 , 因此 当 9 在 原点 的 某 
一 邻 域 上 连续 时 , 左边 趋 于 w(0). 但 是 , 因为 , pn(0) = 1, 所 以 我 们 有 p(0) = 1, 另 
一 方面 , 对 于 所 有 的 z, V2rmn(z) < 1, 从 而 右边 < FT 一 00,o0}. 于 是 FT-eocoy > 1 
因此 F 是 一 正常 分 布 . p 
系 设 yp 是 一 个 连续 水 数 , {pn} 是 一 列 特征 函数 . 如 果 处 处 有 pn p， 那么 p 也 
是 一 个 特征 函数 ， 
例 (b) 波 利 亚 准 则 . 设 岂 是 这 样 一 个 实 的 偶 画 数 ， 使 得 w(0) = 1， 并 且 其 图 形 在 
0,00 上 是 凸 的 ， 那 么 , w 是 一 个 特征 函数 . 实际 上 , 我 们 在 15.2 节 例 (b) 中 曾 看 到 ， 
当 图 形 是 凸 多 边 形 时 这 个 断言 是 正确 的 . 因为 止 曲线 的 内 接 多 边 形 是 凸 的 , 所 以 一 
般 断 言 是 系 的 直接 推论 . 这 个 准则 (以 及 它 的 一 个 很 复杂 的 证 明 ) 在 早期 具有 意 想 
不 到 的 价值 ，G. 波 利 亚 在 1920 年 曾 利用 它 来 证 明 , 对 0 < a < ber-kle 是 一 个 稳 
定 分 布 的 特征 函数 , (据说 柯 西 已 知道 这 个 事实 , 但 是 没 给 出 证 明 . ) 人 
1 < a < 2,e-lle 也 是 特征 函数 , 但 是 这 个 准则 不 再 适用 了 . 

我 们 把 证 明定 理 1 时 所 用 的 方法 的 充分 利用 推迟 到 第 19 章 , 但 是 ， 我 们 在 这 
里 利用 它 来 推导 一 个 重要 定理 , 此 定理 曾 用 于 表 15-1 的 第 5 号 分 布 和 第 8 号 分 布 . 
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为 了 简略 起 见 ， 当 上 且 仅 当 |y| 在 06,06 上 可 积 时 , 我 们 记 p € 工 . 
定理 3  ( 传 里 叶 反 演 ). 设 P 是 分 布 玉 的 特征 函数 ， 并 设 p EL. 那么 下 有 一 个 
有 界 连 续 密度 f， 


/四 = 支 广 eeGac (3.5) 


证 用 folt) 表示 (3.4) 的 右边 . 那么 , fo 是 下 和 期 望 为 0 方差 为 a? 的 正 态 分 布 
Ma 的 卷 积 Fa = 名。 友 F 的 密度 ， 正 如 以 前 所 提 到 过 的 那样 ， 这 蕴含 当 a 一 0 时 
Fa 一己 从 左边 的 表达 式 显然 可 见 fo(t) 一 f(t)( 有 界 收敛 ), 其 中 f 是 (3.5) 中 所 
定义 的 有 界 连续 函数 . 于 是 对 每 个 有 界 区 间 工 


RD = a= tO (8.6) 


但 是 , 如 果 了 是 下 的 连续 区 间 , 那么 最 左边 的 项 趋 于 F{1}, 因此 f 确实 是 下 的 密 
度 . > 
系 如果 >>0, 那么 为 使 PE 工 , 当 且 仅 当 相应 的 分 布 严 有 一 个 有 界 密度 . 
证 ”根据 上 一 定理 , p 的 可 积 性 保证 有 一 个 有 界 连续 密度 . 反之 , 如 果 斑 有 一 
个 密度 f < M, 那么 对 t+ 二 0 我 们 从 (3.4) 可 得 

ea = - eed < M. (7) 
左边 的 被 积 函数 > 0, 如 果 y 是 不 可 积 的 ,那么 当 a -， 0 时 此 积分 趋 于 co、 > 
例 (c) 普 明 谢 雷 尔 (Planchrel) 恒等式 . 设 分 布 有 一 个 密度 了 和 一 个 特征 隐 数 
yp. 那么 , 为 使 lp? e 5， 当 且 仅 当 f? eL, 在 这 种 情形 下 ， 


a7 


[rw /vOPa. (38) 
实际 上 ,leP 是 对 称 化 了 的 分 布 'F 的 特征 西数 .如果 |pP < ,那么 由 此 推出 oF 
的 密度 

oa= 人 yo+aj)ay (39) 
是 有 界 连 续 的 .(3.8) 的 左边 等 于 of(0), 把 反 演 公式 (3.5) 应 用 于 9f， 可 证 明 这 对 
右边 也 是 正确 的 . 反之 , 如 果 2 e 那么 把 施 瓦 兹 不 等 式 应 用 于 (3.9), 可 证 明 9 


是 有 界 的 ， 从 而 根据 上 一 系 有 |pl? e 工 . 我 们 将 在 19.7 节 中 再 次 讨论 关系 式 (3.8). 
例 (d) 密度 的 连续 性 定理 . 设 pn 和 yp 是 可 积 的 特征 函数 , 使 得 


/= lpn(©) ~ p(Olac 一 0. (3.10) 
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根据 上 一 系 ， 相 应 的 分 布 FE 和 正 分 别 具 有 有 界 连 续 密 度 fn 和 f， 从 反 演 公式 
(3.5) 可 看 出 


lfn() — Fo) < (2 广 |pn(G) 一 (Old 


因此 , 一 致 地 有 fn 一 f. (又 见习 题 12. ) 
例 (e) 分布 画 数 的 反 演 公式 . 设 下 是 一 个 特征 函数 为 p 的 分 布 , 又 设 h> 0 是 任 
意 固定 的 ， 我 们 来 证 明 ， 当 下 列 被 积 函数 可 积 时 [例如 它 是 O(1/62),， 即 当 〈 一 oo 
时 |p(O)| = OU ， 
ey 

et 六 -re) - 让 人 了 vO} 证 e-irde. (3.11) 
实际 上 , 左边 是 下 和 和 集中 于 一 h,0 上 的 均匀 分 布 的 卷 积 的 密度 ; 根据 乘积 法 则 , 积 
分 号 下 exs 的 因子 是 这 个 卷 积 的 特征 函数 . 因此 ，(3.11) 只 不 过 是 一 般 反 演 公式 
(3.5) 的 一 个 特殊 情形 . p 
关于 所 亩 的 反 演 公 式 的 注 ”只 有 当 |w(6)/| 在 无 穷 远 邻 域 可 积 时 公式 (3.11) 才能 
应 用 , 但 是 这 一 公式 的 一 个 明显 变形 却 是 在 一 般 情况 下 都 可 应 用 的 ， 例 如 , 设 Fa 
表示 FF 与 方差 为 a? 的 对 称 正 态 分 布 的 卷 积 , 于 是 根据 (3.11)， 


ee oo Sal—e-ih 
e+ Fo(z) _ 去 上 ?0 c21 二 eickd(. (3.12) 


断言 “如 果 z 和 z+h 是 下 的 连续 点 , 那么 当 a 一 0 时 右边 趋 于 [F(z+h) 一 F(z)]/h” 
是 一 个 典型 的 “ 反 演 定理 ”. 可 以 给 出 无 数 个 等 价 公 式 , 传统 的 形式 是 在 (3.12) 中 把 
正 态 公布 换 为 -Pt 上 的 均匀 分 布 并 令 t 一 oo. 由 于 习惯 势力 的 影响 , 这样 的 反 演 
公式 仍然 是 一 个 受 欢 迎 的 课题 ， 虽 然 它 们 已 失去 其 重要 性 : 用 狄 利克 雷 (Dirichlet) 
积分 来 推导 反 演 公式 有 损 于 理论 的 逻辑 结构 . 

我 们 从 特征 函数 为 可 积 的 分 布 转向 格 点 分 布 . 设 已 对 点 5+ kh 赋予 质量 pk， 
其 中 pk >0 且 汀 pk =1. 于 是 特征 函数 p 为 


¥(6) = Dpreten)e, (3.13) 


我 们 假设 h>0 
定理 4 如 果 9 是 一 个 形 如 (3.13) 的 特征 画 数 ， 那 么 


让 fe i(b+rh)C, 
p= 六, vOe dc. (3.14) 
—n/h 


证 ”被 积 函数 是 一 个 级 数 , 在 这 个 级 数 中 , pk 的 因子 等 于 el*-n%. 根据 大 或 
=7, 它 的 积分 等 于 0 或 产 , 因此 (3.14) 成 立 . > 
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本 节 的 主要 结果 可 以 粗略 地 概述 如 下 : 分 布 FF 的 尾部 越 小 , 它 的 特征 函数 p 
就 越 光滑 ; 反之 , 了 越 光滑 , 9p 在 无 穷 远 处 的 性 质 就 越 好 ( 引 理 2 和 引 理 多. 许多 
与 特征 函数 有 关 的 估计 依赖 于 用 泰勒 (Taylor) 展开 式 的 有 限 多 项 通 近 ei 所 产生 的 
误差 的 估计 . 下 列 引 理 说 明 这 个 误差 被 去 掉 的 第 1 项 所 控制 . 

引 理 10 对 n=1,2,… 和 t> 0， 


1- i mm < (4.1) 


证 用 pn(t) 表示 绝对 值 符号 内 的 表达 式 , 于 是 


过 (这 "一 1 | < 六 


t 
各 iz, 
M(t)= i/ eTdz, (4.2) 
从 而 lor(b| < 1, 此 外 , 对 n>1， 
pn(t) = 这 pn-i(z)dz, (4.3) 


于 是 (4.1) 可 由 归纳 法 得 到 - 
以 后 下 是 一 个 任意 的 分 布 函 数 , p 是 它 的 特征 函数 . 关于 刁 的 矩 和 绝对 和 矩 外 


它们 存在 时 ), 我 们 记 
mn = 了 这 znF{dz}, M, = [ 2 le"Pfdz}. (4.4) 
引 理 2 如 果 Mn < oo, 那么 9 的 nn 阶 导数 存在 ,并 且 由 下 列 连续 夯 数 给 出 : 
gO) = 了 eran pen). (4.5) 
证 vy 的 差 商 为 


去 co eihz 
St 有 -eg [oct pas (0) 


根据 上 一 引 理 ,被 积 函数 不 大 于 |z|, 因此 对 于 n = 1, 断言 (4.5) 可 由 控制 收敛 定 
理 推出 . 一 般 情形 可 用 归纳 法 推出 . a 


@ 同样 的 方法 可 证 , 当 sint 或 cost 的 泰勒 属 开 式 在 有 限 多 项 后 停止 时 ,误差 与 去 掉 的 第 1 项 同 号 ， 
且 绝 对 值 小 于 这 一 项 的 绝对 值 . 例如 , 1 一 cost < 刀 /2. 
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系 ”如果 ma < co, 那么 
G0) =ims, (0) = -ma (4.7) 
上 一 关系 的 过 9 也 成 立 : 如 果 y/'(0) 存在 ,那么 ma < oc. 
证 用 丸 表示 的 实 部 , 我 们 有 
1 — wu(h) = 1 — coshz 


h2 bs 


‘22F{dz}. (4.8) 


ww(0) 的 存在 性 蕴含 w 在 原点 附近 存在 , 并 且 是 连续 的 . 特别 , w(0) = 0, 因为 
4 是 偶 函 数 . 根据 中 值 定理 , 存在 一 个 9, 使 得 0<9 < 1, 且 


wl = |- ue vn | < 2 的 “如 | 


(4.9) 


当 h 一 0 时 ， 右 边 趋 于 w'(0)， 但 是 ，(4.8) 中 积分 号 下 的 分 式 趋 于 了 se 
m2 = co 时 积分 趋 近 于 oo. 关于 推广 见习 题 15. 

例 (a) 一 个 满足 w(0) = 0 的 非常 值 函 数 % 不 可 能 是 一 个 特征 函数 ， 因为 相应 
的 分 布 的 二 阶 矩 等 于 0. 例如 , 当 a > 2 时 , er-lkle 就 不 是 特征 函数 . 

例 (b) ” 弱 大 数 定律 . 设 X1,X2,… 是 具有 共同 特征 函数 p 的 独立 随机 变量 且 
(Xi) =0. 设 5 = Xi 十 … 十 Xn. 平均 值 Sa/m 的 特征 函数 为 p"(4/n). 于 是 在 原 
点 附近 yp(h) =1+ olh), 从 而 当 n 一 co 时 yp(6/n) = 1+ o(l/m). 因此 , 取 对 数 , 我 
们 看 出 pg"(C/n) 一 1. 于 是 根据 15.3 节 的 连续 性 定理 2, 这 蕴含 54/n 的 分 布 趋 于 
一 个 集中 于 原点 上 的 分 布 . 这 就 是 弱 大 数 定律 . 这 个 证 明 的 简单 性 与 直接 性 对 特征 
函数 来 说 是 典型 的 , 其 变形 将 导致 中 心 极限 定理 . 2 

引 理 3 ( 柳 曼 一 勒 贝 格 ), 如 果 g 是 可 积 的 ， 并 且 


7G = 矿 serotodz (4.10) 


那么 当 4 一 士 oo 时 7(() 一 0. 
证 容易 对 有 限 阶梯 函数 g 验证 这 个 断言 . 对 任意 的 可 积 函数 g 和 < > 0, 根据 4.2 
节 的 平均 逼近 定理 , 存在 一 个 有 限 阶 梯 函 数 g1, 使 得 


/ le(z) — gi(z)ldz <e. (4.11) 
-oo 
@ 这 个 论证 不 适用 于 一 阶 导数 . 寻求 Y'(0) 存在 的 条 件 这 个 长 期 引 人 注 意 的 问题 将 在 17.2 节 中 解决 


@ 在 7.7 节 中 曾 证 明 , 即使 在 变量 Xj 的 期 望 不 存在 时 ， 弱 大 数 定律 也 成 立 . 这 里 的 证 明 指出 w' (0) 
的 存在 性 是 一 个 充分 条 件 . 实际 上 它 也 是 必要 条 件 (网 17.2 节 ). 
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9 的 变换 (4.10)? 在 无 穷 远 处 等 于 零 ， 由 上 述 两 个 关系 式 ， 对 所 有 的 《 我 们 有 

hy(Q9 一 mn(O1<e 因此, 对 于 所 有 充分 大 的 |4|, Im(O)| < 2e, 因为 是 任意 的 ,所 

以 当 56 一 二 0 时 (6) 一 0. > 
作为 一 个 简单 的 推论 , 我 们 得 到 

引 理 4 如果 斑 有 密度 f， 那么 当 《 一 士 co 时 2(5) 一 0. 如 果 f 有 可 积 导数 

天 ,…,f( 中 ,那么 当 | 一 oo 时 lp(9| = o(i-?). 

证 第 1 个 断言 已 包含 在 引 理 3 中 了 , 如 果 f' 是 可 积 的 , 那么 利用 分 部 积分 可 得 


92(6) = 去 / esf'(z)dz, (4.12) 


从 而 Ip(《)| = olI41!), 等 等 . > 
附录 ”特征 函数 的 泰勒 展开 式 
不 等 式 (4.1) 可 以 改写 成 形式 


i an twin 
et 人 -1- 吾 交 徊 订 )|< 过 (4.13) 


我 们 由 此 式 利用 (4.5) 可 得 


t"-1 


[Perd-0 -$00 -| < 9 


如 果 Mn < co, 那么 不 等 式 对 任意 的 4 和 + 成立 , 它 给 出 了 y 与 其 泰勒 展开 式 的 前 有 限 项 
之 差 的 上 界 . 在 集中 于 点 1 上 这 一 特殊 情形 下 ， 不等式 (4.14) 化 为 (4.1). 
现在 假设 所 有 的 矩 都 存在 , 并 且 
limsup 2 Mi/”® = A < oo (4.15) 


no0 


那么 nl 的 斯 特 林 公式 显然 表明 , 对 于 人 | < 1/(3 和 ), 当 n 一 oo 时 (4.14) 的 右边 趋 于 0, 从 
而 9 的 泰勒 级 数 在 某 一 个 包含 的 区 间 内 收敛 . 由 此 推出 , ” 在 实 轴 上 任 一 点 的 邻 域内 是 
解析 的 ， 从 而 可 由 它 在 原点 附近 的 等 级 数 完全 确定 .但 是 pf (0) = (ij"mn, 于 是 p 由 下 
的 矩 mn 完全 确定 . 因此 ， 如 果 (4.15) 成 立 , 那么 p 由 下 的 答 唯 一 确定 ,49 在 实 轴 上 任 一 
点 的 一 个 邻 域内 是 解析 的 . 这 个 唯一 性 准则 比 7.3 节 (3.14) 所 氢 述 的 卡 莱 昌 (Carleman) 充 


分 条 件 于 MA” = oo 弱 , 但 是 这 两 个 准则 相差 不 大 ，( 关 于 一 个 不 由 和 矩 确 定 的 分 布 的 例子 ， 
见 7.3 节 .) 


15.5 ”关于 相等 分 量 的 中 心 极限 定理 


与 中 心 极限 定理 有 关 的 工作 对 概率 论 中 现在 通常 使 用 的 工具 的 发 展 和 完善 起 
了 很 大 的 作用 , 因此 比较 一 下 不 同 的 证 明 将 很 有 启发 意义 . 直到 最 近 (P. 列 维 首先 
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利用 的 ) 特征 函数 方法 要 比 林 德 伯 格 的 直接 方法 (更 不 用 说 其 他 方法 了 ) 简单 得 多 ， 
后 一 方法 的 现代 形式 (已 在 8.4 节 中 给 出 ) 也 不 怎么 太 复杂 了 ,此 外 它 还 有 其 他 优 
点 . 另 一 方面 ,特征 函数 方法 可 导致 一 些 现在 用 直接 方法 还 无 法 得 到 的 深刻 结果 . 
本 节 的 局 部 极限 定理 和 将 在 下 一 章 中 氢 述 的 误差 估计 和 渐 近 展开 就 是 这 样 的 例子 . 
我 们 把 具有 共同 分 布 的 变量 这 一 特殊 情形 分 离 出 来 , 部 分 地 是 由 于 它 的 重要 性 , 部 
分 地 是 为 了 在 最 简单 的 情况 下 说 明 这 种 方法 的 本 质 . 
在 本 节 中 Xi1,X2,… 是 具有 共同 分 布 F 和 特征 函数 ” 的 相互 独立 的 变量 . 我 
们 假设 
E(X;) =0, E(X?)=1, (5.1) 
并 设 Sn。 = Xi 十 … 十 XX 
定理 19 Sn/Vn 的 分 布 赵 于 正 术 分 布 N. 
由 15.3 节 中 的 连续 性 定理 2, 这 个 断言 等 价 于 下 列 陈 述 : 对 所 有 的 6, 当 一 oo 
时 
er(CVA = 03 (5.2) 


证 根据 上 节 的 引 理 2, p 有 连续 的 二 阶 导数 ， 从 而 由 泰勒 公式 ， 
etz) = (0) + op (0) + jz2p"(0) + oz”), z=0. (5.3) 


取 6 为 任意 的 数 , 并 令 z = C/n, 可 得 


?( 夸 )-!- 去 人 +o(3)， n— oo. (5.4) 
取 n 次 方 , 我 们 就 得 到 (5.2). 


人 们 自然 希望 ,， 当 具有 密度 / 时， 5/ Vn 的 密度 趋 于 正 态 密度 n. 这 并 不 
总 是 正确 的 , 但 是 幸好 例外 情形 是 相当 “病态 ”的 . 下 列 定理 包含 了 通常 应 用 中 出 
现 的 情况 . 
定理 2 如果 |p| 是 可 积 的 , 那么 Sn/Vn 的 密度 fn 一 致 地 越 于 正 态 密度 n. 
证 傅 里 叶 反 演 公式 (3.5) 对 fn 和 n 都 成 立 , 因此 


" 风 - 
右边 是 与 z 无 关 的 . 我 们 证 明 , 当 n 一 co 时 , 右边 趋 于 0. 由 (5.3)， 可 以 选择 这 样 
的 5>0, 使 得 当 [| < 5 时 ， 


-nal< 去 三 


dd, (5.5) 


lp(O| < eae. (5.6) 
@ 方 闫 的 存在 性 不 是 9 具有 渐 近 正 态 性 的 必要 条 件 . 关于 充 要 条 件 , 见 18.5 节 中 的 系 1. 
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我 们 现在 把 积分 分 成 3 部 分 , 并 证 明 对 于 充分 大 的 n, 每 部 分 都 < e. (1) 正如 我 们 
在 以 上 证 明 中 所 看 到 的 那样 , 在 一 个 固定 的 区 间 -a < ¢ < a 内 , 被 积 函数 一 致 地 趋 
于 0, 从 而 在 =67a 上 的 积分 趋 于 0, (2) 对 于 a < |(| < 5Vn, 被 积 函数 < 2e-4 人 ,从 
而 当 a 充分 大 时 这 个 区 间 上 的 积分 < e. (3) 由 15.1 节 的 引 理 4 我 们 知道 , 当 5 关 0 
时 , |p(G)| < 1. 由 上 节 的 引 理 3 知道, 当 人 | 一 co 时 , 2(9) 一 0. 由 此 推出 lp(O)| 在 
(1>5 上 的 最 大 人 等 一 人 数 9< 于 是 三， (二) -| 小 于 


li>svn 
"1 lo (S$)la #6 dc¢. 5.7) 
三 (二 )| c+ [sn ¢ (57) 
第 一 个 积分 等 于 Vailp| 的 积分 , 因此 基 (5.7) 趋 于 0. a 


实际 上 利用 这 个 证 明 可 得 到 9 稍 强 的 结果 : 如 果 对 某 个 整数 7, |p|j” e 三 , 那么 
一 致 地 有 fn 一 n. 另 一 方面 , 15.3 节 定 理 3 的 系 说 明 , 如 果 |p|" 都 是 不 可 积 的 , 那 


么 每 个 fn 都 是 无 界 的 由 于 其 奇特 性 , 我 们 举例 来 说 明确 实 可 能 出 现 这 种 病态 . 
例 (a) 对 z>0 和 p>1, 令 


wo) = Tz (5.8) 


设 9 是 集中 于 友 T 上 的 密度 , 使 得 在 某 个 区 间 0,h 上 g(z) > up(z). 存在 一 个 区 间 0,5, 使 
得 在 这 个 区 间 内 , up 单调 减少 , 且 


六 四 > wle usb)ay > ae = um 人) (5.9) 


利用 归纳 法 可 推出 , 对 于 n = 2*, 存在 一 个 区 间 0,hn, 使 得 g"” > unp， 从 而 当 z 一 0+ 
时 , g™(z) 一 oo. 因此 , 所 有 的 卷 积 9”” 都 是 无 界 的 . 

例 (b) ”上 例 的 一 个 变形 以 更 极端 的 形式 显示 出 同样 的 病态 . 设 v 是 通过 把 g 对 称 化 所 得 
到 的 密度 , 令 


f(z) = je +1) +v(z — 1)], (5.10) 


那么 f 是 集中 于 一 3,2 上 的 一 个 偶 概率 密度 . 我 们 可 以 假设 它 有 单位 方差 . 上 例 的 分 析 
表明 ， 除 了 在 原点 外 ,v 是 连续 的 ， 在 原点 外 v 是 无 界 的 . 同样 的 结论 对 所 有 的 卷 积 v"* 
也 是 正确 的 . 于 是 jP"*(z) 是 值 v2"*(z + 有 )(k = 0, 土 1,… ,十 n) 的 线性 组 合 ， 因 此 它 在 
点 k(k = 0, 士 D…, 士 n) 处 是 无 界 的 . 密度 为 f 的 变量 Xi 的 正规 和 52n/V2n 的 密度 为 
Jpn(z) = V2nf2>”(zV2n). 除了 在 形 如 上 /V2n(k = 0, 土 1,…, 士 n) 的 2n + 1 个 点 以 外 它 
是 连续 的 ,在 这 些 点 处 它 是 无 界 的 ,因为 对 于 每 个 有 理 点 t, 有 相应 的 无 穷 多 对 k,n 使 得 
k/V2n = t， 所 以 Sn/Vn 的 分 布 赵 于 名 ,但 是 密度 fn 在 任 一 有 理 点 上 不 收效 ， 序 列 {fn} 
在 每 个 区 间 上 是 无 界 的 . 


@ 唯一 的 改变 是 , 在 (5.7) 中 把 因子 ?1 换 成 7 下", yp 换 成 7 
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例 (ec) 见习 题 20. > 

最 后 我 们 转向 格 点 分 布 , 即 假设 变量 Xi 局 限于 取 形 如 5,5 土 h,5 土 2h,… 的 值 . 
我 们 设 h 是 分 布 F 的 步 长 , 即 h 是 具有 上 述 性 质 的 最 大 正 数 . 15.1 节 的 引 理 4 说 
明 |p| 有 周期 2r/h， 从 而 |p| 是 不 可 积 的 , 然而 对 于 Sw/ Vn 的 分 布 的 原子 质量 有 
一 个 完全 类 似 于 定理 2 的 结论 . 所 有 这 些 原子 都 在 形 如 z = (nb 十 kh)/ Vn 的 点 之 
中 , 其 中 大 = 0, 土 1, 圭 2,…. 对 于 这 样 的 x, 我 们 令 


pn(z) =?{ 各 -中 ， (5.11) 


而 设 pn(z) 对 于 所 有 其 他 的 z 都 没有 定义 ， 因此 ,在 (5.12) 中 的 z 局 限于 包含 
Sn/Vn 的 所 有 原子 的 最 小 格 . 
定理 3 如 果 下 是 一 个 步 长 为 hh 的 格 点 分 布 , 那么 当 n 一 oo 时, 关于 工 一 致 地 有 


次 ma 一 m(z) 一 0. (5.12) 
证 由 (3.14) 可 得 

ER OE DS A WE 
m= 去 人? ($a. (5.13) 
再 利用 正 态 密度 n 的 信里 叶 反 演 公 式 (3.5), 我 们 看 到 (5.12) 的 左边 由 下 式 所 控制 ， 

Vinin/h 
n (Se-l -$6? 

人 攻 (所) 2 [act fine a (9 
在 定理 2 的 证 明 中 已 指出 , 第 1 个 积分 趋 于 0. 第 2 个 积分 显然 趋 于 0, 这 就 完成 
了 证 明 . > 


15.6 ” 林 德 伯 格 条 件 
我 们 现在 考虑 这 样 的 独立 变量 Xi 的 序列 , 使 得 
EC = 0， E(X8) = oR. (6.1) 


我 们 用 Fi 表示 Xk 的 分 布 ,用 px 表示 它 的 特征 函数 ， 照例 令 Sn = Xi 十 … 十 
Xn,82 = Var(Sn), 于 是 
2 = 02 +-…++o2. (6.2) 
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我 们 称 {X} 满足 林 德 伯 格 条 件 , 如 果 对 于 每 个 固定 的 t > 0， 
亏 bp 站 TF{d7} 一 0， 了 一 oo. (6.3) 


mn £1 zl>tsn 

粗略 地 说 ， 这 个 条 件 要 求 方差 o% 主要 是 由 于 长 度 比 sn 小 的 区 间 中 的 质量 产生 的 . 
显然 ，o2/s3 小 于 妇 加 上 (6.3) 的 左边 ， 由 于 t 是 任意 的 ，(6.3) 列 含 对 于 任意 的 
< > 0 和 充分 大 的 n， 


Ok 
— ge 
Sn 


oe (6.4) 
这 当然 昔 含 sn 一 co. 

an/sn 可 以 看 作 分 量 Xn 对 加 权 和 Sn/sn 的 贡献 的 一 种 量度 ， 从 而 (6.4) 可 以 
叙述 为 : Sn/sn 渐 近 地 是 “许多 单个 可 忽略 分 量 ”之 和 , 林 德 伯 格 条 件 曾 在 8.4 节 
(4.15) 中 引入 过 , 下 列 定理 和 8.4 节 的 定理 3 一 致 每 个 证 明 都 有 它 的 优点 . 现在 这 
个 证 明 使 得 我 们 能 够 证 明 林 德 伯 格 条 件 在 某 种 意义 上 是 必要 的 ; 它 还 可 导致 第 16 
章 中 的 渐 近 展开 和 密度 的 收敛 定理 (习题 28). 
定理 1 如 果林 德 伯 格 条 件 (6.3) 成 立 , 那么 正规 和 Sn/sn 的 分 布 趋 于 标准 正太 分 
市 N. 
证 设 5>0 是 任意 固定 的 . 我 们 来 证 明 


ol(C/sn) pn(C/sn) — ec. (6.5) 


因为 pk(0) = 0 且 对 于 所 有 的 z,|eok(z)| < 吕 ， 所 以 由 两 项 的 泰勒 展开 式 和 
(6.4) 推出 ,对 于 充分 大 的 n， 


Ipx(¢/sn) — 1 < BoR/s2 < eC? (6.6) 
我 们 来 证 明 ,如 果 这 是 正确 的 ， 那 么 (6.5) 等 价 于 


和 eu(/so) -+ 26° — 0. (6.7) 
k=1 


事实 上 ， 我 们 曾 在 (2.4) 中 看 到 ，e?* ”是 一 个 复合 泊 松 分 布 的 特征 函数 ， 从 而 
ler“| < 1. 对 于 任意 使 lax| < 1, bk| < 1 的 复数 a, bk 有 


n 
la an 一 bn 和 < lax — brl. (6.8) 
k=1 


此 式 可 由 下 述 恒等式 用 归纳 法 推出 : 


Z1272 — Yiy2 = (71 — Wi)z2 十 (za — yo). 
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对 于 任 一 5 > 0, 如 果 |z| 充分 小 , 那么 我 们 有 le* 一 1 一 z| < dlz|, 从 而 由 (6.6) 我 
们 得 到 , 对 于 较 大 的 n， 


leTlee(¢/sm) 7 ~ pi(C/sn) -pn(C/sn)| < lee* /sm — pelC/sn)| 
k=1 (6.9) 
< D3 lpx(C/sn) — 1 < él (C3/ 台 村 避 = = 650. 
k=1 


因为 5 是 任意 的 , 所 以 左边 趋 于 0, 从 而 为 使 (6.5) 成 立 , 当 且 仅 当 (6.7) 成 立 . 
(6.7) 可 以 改写 成 如 下 形式 : 


n 


eh izC 
2 | Wh -| (6.10) 
由 基本 不 等 式 (4.1) 推出 , 当 |z| < tsn 时 , 被 积 函 数 被 |zC/snj? < tk3z2/s2 控制 ; 
当 |z| > tsn 时 , 被 积 函 数 被 z22C?/s2 控制 . 因此 , (6.10) 的 左边 的 绝对 值 


>tan 


< t(3 十 28 人 Z2Fkfdz}. (6.11) 


由 林 德 伯 格 条 件 (6.3), 第 2 项 趋 于 0; 因为 t 可 以 取得 任意 小 ， 所 以 (6.10) 成 立 .> 
在 8.4 节 和 8.10 节 的 习题 17 ~ 习题 20 中 曾 给 出 过 说 明 性 例子 ,在 下 面 的 习 
题 26 和 习题 27 中 也 将 给 出 说 明 性 例子 
下 列 定理 包含 定理 1 的 一 个 部 分 道 
定理 2 假设 sn 一 oo,an/sn 一 0. 那么 林 德 伯 格 条 件 (6.3) 是 Sn,/sn 的 分 布 收 伍 
于 NM 的 必要 条 件 . 
警告 ”我 们 即将 看 到 , 即使 林 德 伯 格 条 件 不 成 立 ,5 /sn 的 分 布 也 可 能 收敛 于 方差 
小 于 1 的 正 态 分 布 . 
证 “我们 从 证 明 (6.4) 成 立 开始 . 根据 假设 , 存在 这 样 的 使 得 对 于 n > won/sn < 
6. 于 是 对 于 v <k< nn 我 人 有 ok/sn < ok/sk < <. 满足 k<v 的 vv 个 比 ok/sn 趋 
于 0, 因为 sn 一 oo. 
其 次 假设 5,/sn 的 分 布 趋 于 名, 即 假设 (6.5) 成 立 . 我 们 在 上 一 证 明 中 已 看 到 ， 
当 (6.4) 成 立时 ， 这 个 关系 式 昔 含 (6.10). 因为 cosz - 1 + 了 22 > 0， 所 以 被 积 函 数 
的 实 部 是 非 负 的 , 因此 左边 的 实 部 


2 Lar ( 蓝 加 9) A (i > 2) 家 二 J TF {dr} 


2 
nk=1 
(6.12) 
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于 是 对 任意 的 《和 右边 趋 于 0, 从 而 (6.3) 成 立 . p 
条 件 cn/sn 一 0 不 是 严格 必要 的 , 这 可 由 所 有 分 布 Fi 都 是 正 态 分 布 这 一 特殊 
情形 看 出 : 些 时 ok 可 以 取 任意 值 , 而 Sn/sn 的 分 布 与 名 一 致 (又 见习 题 27). 但 是 
条 件 on/sn 一 0 是 保证 各 项 Xk 的 影响 为 渐 近 可 忽略 的 一 个 很 自然 的 方法 . 如 无 这 
个 条 件 , 问题 的 性 质 就 有 根本 的 变化 . 即使 cn/sn 一 0， sn 一 co,， 林 德 伯 格 条 件 
也 不 是 “存在 正规 化 常数 an 使 5%/an 的 分 布 趋 于 RM” 的 必要 条 件 . 下 例 将 阐明 这 
种 情况 . 
例 ” 设 {Xn} 是 一 个 满足 定理 1 的 条 件 [包括 (6.1)] 的 变量 序列 . 设 Xi 是 相互 独 
立 的 且 和 Xi 独立 , 并 使 得 


DP{X% #0} < oo. (6.13) 

n=1 
令 了 m= Xn 十 XZ， 用 3 和 可 表示 {X} 和 {wm} 的 部 分 和 . 根据 波 雷 尔 - 康 
泰利 第 1 引 理 ,以 概率 1 只 有 有 限 多 个 X/ 不 为 0, 从 而 以 概率 1 有 34 = O(sn). 
由 此 容易 推出 ,3/s% 和 Sn/sn 的 分 布 有 相同 的 渐 近 性 质 . 于 是 即使 s2 不 是 本， 
的 方差 ， 5/sn 的 分 布 也 趋 于 凡事 实 上 ,又 不 一 定 有 有 限期 望 . 如 果 E(Xn) = 
0,B(5%) = 可 < oo, 那么 只 有 当 sn/5 趋 于 一 个 极限 p 时 ， 5/5 的 分 布 才 人 
在 这 种 情形 下 ,极限 分 布 是 正 态 的 ,其 方差 p < 1. 

这 个 例子 说 明 ,即使 分 量 X, 的 期 望 不 存在 , 部 分 和 Sn 也 可 以 是 源 近 正太 分 
布 的 , 并 且 方差 并 不 总 是 对 应 的 正规 化 常数 . 由 于 以 下 2 个 原因 我 们 不 在 这 里 研究 
这 个 课题 . 第 一 , 整个 理论 将 包含 在 第 17 章 中 . 更 重要 的 是 ,上 述 定理 的 推广 是 极 
好 的 练习 题 , 习题 29 ~ 习题 32 是 特意 编选 的 , 目的 是 推导 中 心 极限 定理 的 充 要 条 
件 . 
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高 维特 征 函 数 的 理论 如 此 地 类 似 于 及 : 中 的 特征 函数 理论 , 以 致 于 系统 的 叙述 

看 来 是 不 必要 的 . 为 了 氢 述 基本 思想 和 记号 ， 只 需 考虑 二 维 的 情形 就 够 了 . 于 是 X 

表示 具有 给 定 的 联合 概率 分 布 的 两 个 实 值 随机 变量 X; 和 Xo 组 成 的 变量 对 . 我 

们 把 和 X 看 成 是 一 个 具有 分 量 Xi 和 Xs 的 行 向 量 ; 类 伏地, 在 F(z) 中 把 变量 = 看 

成 是 分 量 为 xi: 和 zz 的 行 向 量 . 另 一 方面 ， 相 应 的 特征 函数 的 变量 表示 列 向 量 

= (Gu @). 这 个 约定 有 一 个 优点 , 即 =6 表示 内 积 z6 = Clzl 十 Gzza. 下 (或 下 的 
特征 函数 P 可 定义 为 


9(6) = E(eiX9). (7.1) 
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这 个 定义 在 形式 上 和 一 维 中 的 定义 一 样 , 但 是 指数 有 新 的 解释 , 上 且 积 分 是 对 二 元 分 
布 进 行 的 . 

二 元 特征 函数 的 主要 性 质 是 显然 的 . 例如 选择 62 = 0 就 把 内 积 z6 化 成 了 z1C1， 
从 而 p(G1,0) 表 示 X1 的 (边缘 ) 分 布 的 特征 画 数 . 对 于 参数 C1,C2 的 任 一 国定 的 选 
择 ， 线 性 组 合 C1X1 十 C2X2 是 一 个 (一 维 ) 随机 变量 ， 它 的 特征 函数 为 


E(eMX +e)) = (1 X62), (72) 


此 处 G4 和 C2 是 固定 的 ， 和 是 一 个 独立 变量 特别， 和 Xi + X2 的 特征 函数 为 
%e(X, A). 按照 这 种 方式 可 用 二 元 特征 函数 得 出 所 有 线性 组 合 G1Xi + 42X2 的 一 元 特 
征 函 数 . 反之 , 如 果 我 们 知道 所 有 这 样 的 组 合 的 分 布 , 那么 可 以 计算 出 所 有 的 表达 
式 p(XG1, Xa)， 从 而 可 以 计算 出 二 元 特征 函数 9 . 下 列 例子 说 明了 这 个 方法 的 有 用 
性 和 灵活 性 , 使 用 的 是 3.5 节 中 引进 的 记号 . 

例 (a) “多 元 正 态 特征 函数 . 设 羡 = (Xi,X2)( 看 作 一 个 行 向 量 !) 有 非 退化 正 态 分 
布 . 为 了 简单 起 见 ， 我 们 假设 E(X) = 0, 并 用 C 表示 协 方差 起 阵 E(XXTX). 它 的 
元 素 是 ckk = Var(Xk) 和 cla = c21 = Cov(Xi, X2). 对 于 固定 的 bt 和 C2, 线性 组 合 
5X = C1X1 + C2X2 的 期 望 为 0, 方差 为 


02 = CTOC = cub? + 2c12C1C2 + c228. (7.3) 


把 和 看 作 一 个 独立 变量 , 那么 变量 XC = GD + GoXo 的 特征 函数 为 e-4"" 入 .于 
是 天 = (Xi Xo) 的 二 元 特征 函数 为 


2(6) = eC"C¢. (7.4) 


这 个 公式 在 ” 维 空间 中 也 成 立 ， 只 是 这 时 6TC56 是 7 个 变量 4G,…, 6 的 二 次 型. 
因此 ，(7.4) 表 示 期 望 为 0 协 方差 算 阵 为 C 的 7 维 正 态 分 布 的 特征 函数 ， 
有 时 需要 把 两 对 变量 (Xi, Xa) 和 (G1,C2) 变 成 极 坐标 ， 即 由 下 式 引进 新 的 变 
量 : 
Xi1= ReosO, X2 = Rsin 06, 
G1 = peosa, Ga = psina. 


(关于 这 样 的 变换 见 3.1 节 . ) 这 时 


(7.5) 


9(¢) = E(erR es(0-0)), (7.6) 


但 是 必须 记 住 这 不 是 变量 对 (RR, 9) 的 特征 函数 ; (R, 6) 的 特征 函数 为 EB(eit1R+629)). 


@ 这 就 顺便 地 证 明了 ，R2 中 的 概率 分 布 由 所 有 半 平 面 的 概率 唯一 确定 。 (H. 克拉 美和 沃尔特 (H. 
Wold) 注意 到 的 ) 这 个 事实 似乎 无 法 用 初等 方法 得 到 . 关于 对 矩 的 应 用 见习 题 21. 
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例 (b) 谈 转 对 称 ， 当 对 侦 (Xi, X2) 表示 一 个 “具有 随机 方向 的 向 量 " 时 ( 见 1.10 
节 ), (R, 6) 的 联合 分 布 可 分 解 为 RR 的 分 布 G 和 = 元 元 上 的 均匀 分 布 的 乘积 于 是 
(7.6) 中 的 期 望 与 a 无 关 , 并 且 呈 下 列 形式 : 


pC1,62) = (2r)-! 了 ~ Glar} re (7.7) 
变量 替换 cos9 = z 把 内 层 积分 化 为 习题 6 所 讨论 的 积分 , 于 是 
GO= loctar} p= VG), (78) 
其 中 
za-50- 万 员 全 Cg 


( 贝 塞 尔 函数 万 是 在 2.7 节 中 引进 的 . ) 

具有 随机 方向 的 单位 向 量 使 分 布 G 集中 在 点 1 上 . 于 是 (VE 二 国 是 壮 个 
独立 的 具有 随机 方向 的 单位 向 量 的 合 向 量 的 特征 函数 ， 这 个 结果 是 珊 利 在 研究 随 
机 飞行 时 导出 的 . 
例 (c) ”我 们 考虑 一 种 特殊 情况 , 即 (Xi,X2) 有 二 元 密度 


f(z1,72) = (2m laze er, r= Vr? + (7.10) 


其 中 a 是 一 个 正常 数 . 于 是 (7.8) 呈 如 下 形式 9: 
pb1,02) = o2 I ererJo(pr)rdr = (1+ p?/a?)-3. (7.11) 


例 (d) ”Rs 中 的 旋转 对 称 . 例 (b) 可 以 照搬 到 三 维 中 去 ， 只 是 现在 我 们 有 2 个 极 
角 : 地 理 经 度 w 和 极 距 9. (7.7) 中 的 内 层 积 分 旦 形式 


i 
云 / wf eeose singdb 
—n 0 


1 rnja (7.12) 
= 3/ (eireeose + eirecos0) sin qd0, 


@ 用 J 的 表达 式 (7.9) 代 闪 Jo, 我 们 得 到 
3 
(2k+ D! 2k -= 
v9) =) -=( ) ()， 


这 是 (1 + pz/a2)- ;的 二 项 级 数 . 
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其 中 奏 = 对 十 全 十 人 代 换 cosb =z 把 此 式 化 为 (rp)-1 sinrp, 从 而 有 一 个 类 似 于 
(7.8) 的 公式 


pC GyG) = / 这 reG{ar}, (7.13) 


特别 , 对 于 单位 随机 向 量 , 这 个 积分 化 为 p-! sin p, 令 Ga = Cs, 我 们 可 以 看 到 单位 
随机 向 量 的 Xi 分 量 的 特征 函数 为 C71 sinG1. 于 是 我 们 得 到 了 1.10 节 所 建立 的 下 
列 事实 的 一 个 新 证 明 : 这 个 分 量 在 一 I,IT 上 是 均匀 分 布 的 . p 

可 以 留 给 读者 去 验证 , 关于 一 维特 征 函 数 的 主要 定理 无 需 本 质 上 的 改变 就 可 
照搬 过 来 . R2 中 的 傅 里 叶 反 演 定理 说 明 ， 如 果 P 在 整个 平面 内 是 (绝对 ) 可 积 的 ， 
那么 大 有 有 界 连 续 密度 


十 oo 
f(z1,22) = Ey ff ery caraes. (7.14) 


例 (e) ”二 元 柯 西 分 布 . 把 反 演 公式 (7.14) 应 用 于 例 (c) 的 密度 f, 并 用 f(0,0) = 
(2r)-:a2 除 以 所 得 的 结果 , 就 可 看 出 


v(G1,62) = TeV ete (7.15) 
表示 下 式 定义 的 二 元 密度 9 的 特征 函数 : 


a 


g(z1,72) = 82 十 吉 十 二 下 


(7.16) 
由 此 推出 , 这 个 密度 具有 普通 柯 西 密度 的 主要 性 质 . 特别 地 , 它 是 严格 稳定 的 : 如 果 
义 中 ,…,XX( 是 密度 为 (7.16) 的 相互 独立 向 量 值 变量 , 那么 它们 的 平均 值 ( 筷 0D) 十 
…' 十 发 0)/n 有 相同 的 密度 . > 


*15.8 正 态 分 布 的 两 种 特征 


我 们 从 一 个 由 P. 列 维 猜测 到 的 在 1936 年 被 H. 克拉 美 证 明了 的 著名 定理 开始 . 
遗憾 的 是 它 的 证 明 依赖 于 解析 函数 论 ， 因此 和 我 们 关于 特征 函数 的 讨论 不 大 协调 . 
定理 1 设 X 和 X2 是 独立 随机 变量 , 它们 的 和 的 分 布 是 正 态 的 . 那么 XI 和 X2 
都 是 正 态 的 ， 


* 本 节 讨 论 的 课题 较 特殊 ， 只 在 习题 27 中 用 到 . 
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换 句 话说 , 正 态 分 布 是 不 能 分 解 的 (除了 以 微不足道 的 方式 分 解 外 ). 上 面 的 定 
理 的 证 明 是 以 下 列 具 有 某 种 独立 意义 的 引 理 为 基础 的 . 
引 理 设 玉 是 这 样 一 个 概率 分 布 , 使 得 对 于 某 个 9 > 0， 


10= [erptas) <o. GD 


那么 特征 函数 p 是 一 个 (对 所 有 复数 《 都 有 定义 的 ) 整 函数 . 如 果 对 于 所 有 的 复数 
Ge2(G) 关 0,， 那么 下 是 正 态 的 . 

引 理 的 证 明 ”对 于 所 有 的 复数 《 和 实数 z,n, 我 人 有 |z6| < mr2 十 人 ?2， 从 而 
定义 p 的 积分 对 所 有 的 复数 5 都 收敛 , 并 且 


|e(O< er KF. f(n). (8.2) 
这 就 是 说 ，p 是 一 个 阶 数 < 2 的 整 画 数 ， 如 果 这 样 的 一 个 函数 没有 零点 ， 那 么 
log9(5) 是 二 次 多 项 式 ?, 因此 p(C) = e-306 t+， 其 中 ob 是 (可 能 为 复数 的 ) 数 ， 
但 是 , ”是 特征 函数 ， 从 而 ip (0) 等 于 期 望 , ~"(0) 是 分 布 的 二 阶 算 . 由 此 失 由 ， 6 
是 实数 , a > 0, 因此 F 确实 是 正 态 的 . 
定理 1 的 证 明 不 失 一 般 性 , 我 们 可 以 假设 变量 Xi 和 Xa 已 这 样 规定 了 中 心 ， 上 
致 于 原点 是 每 个 变 基 的 中 位 数 . 于 是 
P{IX1+ Xl> 相 > 3P{lxl > (8.3) 
利用 通常 的 分 部 积分 [ 见 5.6 节 ] 可 证 明 
Js 天 三 reg- F(a) + F(a)ar, (8.4) 
0 


因此 相应 于 X 的 函数 fi 满足 不 等 式 fr(n) < 2f(n) < co 由 于 pi(G)pa(6) = 

eo6+ibb， 所 以 pl 和 pz 都 不 可 能 有 零点 , 因此 Xi 和 Xa 都 是 正 态 的 . p 
我 们 转向 在 3.4 节 中 引进 并 讨论 过 的 正 态 分 布 的 下 列 特征 的 一 种 证 明 . 

定理 2 设 Xi 和 Xo 是 独立 变量 , 并 且 


Yi=auXi+a2X2, Y= a2X1 十 az22X2. (8.5) 


如 果 防 和 号 也 是 相互 独立 的 , 那么 或 者 所 有 4 个 变量 都 是 正 态 的, 或 者 变换 (8.5) 
在 并 =aXi 和 了 3=bX2 或 也 二 aX2 和 Yo 二 bXi 的 意义 上 是 不 足 道 的 . 


@ 例如 见 E. Hille, Analytic function theory, Boston, 1962, vol. IL p+ 199( 阿 达 马 (Hadamard) 
因 式 分 解 定理 )- 
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证 对 于 具有 连续 密度 的 变量 X; 的 特殊 情形 , 这 个 定理 在 3.4 节 中 已 证 明 过 了 
证 明 依赖 于 3.4 节 (4.4) 泛 函 方程 的 一 般 解 ,我 们 现在 来 证 明 ,随机 变量 X; 的 特 
征 函 数 wy 满足 一 个 同样 类 型 的 方程 . 我 们 首先 说 明 只 要 考虑 实 的 特征 函数 就 够 了 . 
这 个 论证 说 明了 定理 1 的 用 处 . 

(a) 化 成 对 称 分 布 . 引入 一 对 相互 独立 且 与 X; 独立 的 变量 Xi 和 Xz, 它们 分 
别 与 -Xi 和 一 X2 有 相同 的 分 布 . 线性 变换 (8.5) 把 对 称 变量 X? = X; + X7 变 成 
一 对 独立 的 对 称 变量 (Yi,? 3). 如 果 定理 对 这 样 的 变量 成 立 , 那么 ?Xj 是正 态 的 . 
根据 定理 1, 这 蕴含 Xi 也 是 正 态 的 . 

(b) 泛 函 方程 . 由 于 假设 责 和 玖 独立 , 所 以 (i,Y) 的 二 元 特征 函数 一 定 能 
分 解 为 

E(e((Y+62Y)) = BE(eiGaYa)E(eicat)、 (8.6) 
把 (8.5) 代入 , 我 们 看 出 ,这 个 关系 式 绪 含 下 列 关 于 Xi 和 Xz 的 特征 函数 的 恒 等 
式 : 


Pi(anb1+ a21C2)p2(a12C1 + a22C2) 
= pi(auki)p2(a1261)p1 (P2162)p2(02262). (8.7) 


除 a12 和 a21 的 作用 变换 了 以 外 , 这 个 恒等式 和 3.4 节 (4.4) 是 一 致 的 . 根据 假设 , py 
是 连续 实 函数 ,正如 在 3.4 节 中 所 看 到 的 那样 ， 可 以 假设 所 有 的 aj 都 不 为 0. 因 
此 , 根据 3.4 节 的 引 理 ,Pi(() = er”%4 ， 从 而 Xi 是 正 态 的 . [a 


15.9 习 题 
1， 利用 不 等 式 (1.7) 证 明 (不 用 计算 ); 对 每 个 特征 函数 w， 


le(OP <1- 1— eeo) < e-40-IpCOD, 0 


2， 如 果 p =u+iv 是 一 个 特征 函数 , 证 明 ， 
(0 < $0 +u(20)). (92) 
这 又 殖 售 
lw(OF < $0 + lp(20)D). (9.3) 


提示 : 利用 施 瓦 效 不 等 式 证 明 (9.2), 证 明 (9.3) 时 考虑 形 如 ei*¢p(C) 的 特征 函数 . 
3， 证明 (记号 同上 ): 
le(G) — p(CYP < 20 一 w(c — 6)]. {9.4) 
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当 名 = 一 时 ,此 式 包含 (1.7). 

4， 利 用 初等 公式 证 明 (无 需 明 确 地 求 出 积分 ): 密度 (1/m)[(1 - cosz)/z?] 的 特征 函数 p 
与 326| 一 长 + 并- 发 一 于 只 相差 一 个 常数 因子 . 证 明 : 对 于 {| < Le()=1 一 人 

5。 利用 密度 jo 的 特征 函数 通过 关于 a 的 简单 微分 来 推导 一 个 新 的 特征 函数 . 利 
用 这 个 结果 来 证 明 : 给 定 的 分 布 与 其 本 身 的 卷 积 有 密度 jaermia + alz)). 

6， 设 了 是 由 下 列 定 义 的 集中 于 I,T 上 的 密度 : 


f(z)= 


1 


(9.5) 


证 明 , 它 的 特征 函数 为 
志 
"0= 半 三 (#) -ao G06) 


k=0 


注意 (5() = Jo(iC), 其 中 Io 是 2.7 节 式 (7.0 中 定义 的 贝 塞 尔 函 教 . 提示 : 把 ex” 展 
成 释 级 数 ,6" 的 系数 是 用 积分 给 出 的 , 利用 分 部 积分 对 n 用 归纳 法 可 以 验证 (9.6). 

7， 具 有 集中 于 而 了 上 的 密度 1/{xVz(I 一 z)] 的 反正 弦 分 布 的 特征 函数 为 ex</?Jo(C/2). 可 
示 : 化 为 上 题 . . 

8， 利 用 表 15-1 的 第 10 号 来 证 明 : 2r2z . (sinhz)-! 是 一 个 特征 函数 为 2/[1 + cosh(rc)] 
的 密度 . 提示 : 利用 2.9 节 的 习题 6. 

9， 设 YL 表示 15.2 节 例 (c) 所 述 的 周期 为 2 的 特征 函数 . 证明, 2yz - 7z 也 是 一 个 算 
术 分 布 的 特征 函数 . 它 的 图 形 可 通过 在 图 2 中 每 隔 一 个 三 角形 关于 〈 轴 反 射 一 个 三 角 
形 而 获 得 . 

10.@9 设 XX 和 YY 是 独立 的 ， 其 分 布 函数 分 别 为 和 G, 特征 函数 分 别 为 p 和 y. 证 明 ， 
乘积 XY 的 特征 函数 为 


万 ?Canal= 三 wactaa (97) 


11. 如 果 {pn} 是 这 样 的 一 个 特征 函数 序列 , 使 得 对 于 -5 < 5 < 6,pn(6) 一 1， 那么 对 于 
所 有 的 《pn(《) 一 1 
12. 设 9 是 一 个 特征 函数 为 严格 正 的 偶 密 度 , 那么 


sels) = Ol = coal 


1 =) 0 


的 和 2 -7 +0) -7 -0) 
_ 2 -7 +0) -yc -a 
0 人 


的 概率 密度 . 当 a 一 co 有 ?a 一 Y,， 但 是 ge 一 9 却 不 成 立 . 这 就 说 明了 在 密度 的 连续 

性 定理 中 , 条 件 (3.10) 是 必 不 可 少 的 . 

@ 把 (9.7) 与 5.9 节 例 (b) 的 脚注 中 的 定理 结合 起 来 ， 可 得 下 列 的 辛 钦 准则 , 函 教 w 是 一 个 单 峰 分 
布 的 特征 阔 数 , 当 且 仅 当 w(C) = 人 (Cz)dz, 其 中 yp 是 一 个 特征 函数 . 
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13. 


14. 


15. 


16. 


17. 


18. 


19. 
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如 果 7 是 一 个 实 的 特征 函数 , 且 Y > 0, 那么 存在 特征 函数 Yn 为 严格 正 的 偶 密度 gw， 
使 得 Yn 一 7. 提示 : 考虑 混合 (1 一 =G + eF 和 卷 积 . 

如 果 Y 是 一 个 满足 Y > 0 和 7(a) 关 1 的 特征 函数 ,那么 (9.9) 确定 了 一 个 特征 函数 . 
提示 : 利用 上 两 题 . 

(4.7) 之 北 的 推广 考虑 分 布 (1/m2k)z*F{dz}( 当 它们 存在 时 ), 用 归纳 法 证 明 : 为 使 分 
布 尺 具 有 有 限 矩 m2r, 当 且 仅 当 特征 函数 在 原点 的 2r 阶 导数 存在 . 

设 了 是 一 个 具有 正 的 可 积 特征 函数 的 概率 密度 . 那么 f 有 唯一 的 一 个 最 大 值 , 此 最 大 
值 在 原点 达到 . 如 果 二 阶 导数 f” 存 在, 那么 


f(0) > f(z) > f(0) — S00), (9.10) 


类 似 的 展开 式 对 泰勒 展开 式 前 2r 项 也 成 立 . 注意 了 是 偶 函 数 ， 从 而 f(*+9(0) = 0.] 
设 是 一 个 具有 二 阶 连续 导数 p” 的 实 特征 函数 . 那么 [除非 对 于 所 有 的 4,p(C) = 蔬 ， 


(5) = 二 (9.11) 
是 一 个 偶 密度 的 特征 函数 , 这 个 户 对 于 zx > 0 被 定义 为 
Fo [/ 1- F(at. (9.12) 
试 向 高 维 推广 . 
设 f 是 一 个 具有 特征 函数 p 的 偶 密度 . 对 于 z > 0, 令 
"0= OE, ss =s0) (013) 


那么 9 也 是 偶 密 度 , 并 且 它 的 特征 函数 为 
本 
7(0)= < / p(s)ds. (9.14) 


设 是 这 样 的 一 个 特征 函数 , 使 得 当 一 oo 时 jy(6)| = 1. 相应 的 分 布 下 是 纯 奇异 的 
(关于 勒 贝 格 测度 ). 


, 假设 c > 0，》 cx = 1 但 是 cx2* = co. 设 以 是 集中 于 =T,T 上 的 连续 侦 密度 , 


是 它 的 特征 函数 ,那么 


f(z) = D_ cx2*u(2*z) (9.15) 
也 定义 了 一 个 密度 , 除了 在 原点 之 外 , 这 个 密度 是 连续 的 ， 它 的 特征 函数 为 
op(GO) = >》 cxw(2 -0). (9.16) 


证 明 jp|" 对 于 任 一 n 都 是 不 可 积 的 . 提示 : 对 于 z 头 0， (9.15) 中 的 级 数 是 有 限 的 . 利 
用 显然 的 不 等 式 (》 cxpr)”> 》 cgps， 此 式 对 pk > 0 成 立 . 
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21. 


22. 


24. 
25. 


27. 


R2 中 乱 的 问题 . 设 Xi 和 X2 是 两 个 具有 联合 分 布 的 随机 变量 . 令 4k = E(|X1|*) 十 
E(|X2|*), 证 明 : 如 果 limsupk-!AX* < co, 那么 下 被 它 的 矩 所 唯一 确定 . 提示 : 正 
如 15.7 节 第 1 个 脚注 所 指出 的 那样 ,只 要 证 明 所 有 线性 组 合 ci Xi + aaX2 的 分 布 被 
唯一 确定 就 行 了 . 利用 准则 (4.15). 

退化 的 二 元 分 布 . 如 果 p 是 一 个 一 元 的 特征 函数 , al ,az 是 任意 常数 , 证 明 : 作为 41, C2 
的 函数 , p(a1b1 + az6a) 表示 一 个 满足 oaXa = al Xa 的 对 侦 (X1, Xz) 的 二 元 特征 函数 . 
试 述 其 逆 . 考虑 oa = 0 的 特殊 情形 - 


. 设 X,Y,U 是 具有 特征 函数 p,w,w 的 相互 独立 随机 变量 . 证 明 : 乘积 p(G1)v(C2)w(b1 十 


Ga) 表示 对 偶 (U 十 XX,U + 了 ) 的 二 元 特征 函数 . 提示 : 利用 三 元 特征 函数 . 
中 心 极限 定理 的 例子 与 补充 


利用 特征 函数 的 方法 证 明 8.4 节 中 关于 随机 和 的 中 心 极限 定理 4. 
设 Xk 有 密度 e ze*-1/T(ak)， 其 中 ak 一 00. sn 的 方差 是 82 = (ol 十 …: + an). 证 
明 : 如 果 


sn a2 —0, 
bt 


那么 {X} 满足 林 德 伯 格 条 件 . 


. 设 P{Xx = +1} = (k 一])/2k,P{Xs = 士 VR] = 1/2k. 不 存在 这 样 的 正规 化 常数 on， 


使 Sn/an 的 分 布 趋 于 M, 提示 : 利用 


讨论 指数 分 布 . 

如 果 Sn/sn 的 分 布 趋 于 名, 但 是 on/sn 一 p > 0, 那么 Xn/sn 的 分 布 趋 于 一 个 方差 为 
p? 的 正 态 分 布 . 提示 : 根据 15.8 节 的 克拉 美 - 列 维 定理 , 如 果 只 = U 友 V, 那么 U 和 
V 都 是 正 态 的 . 利用 Xn/sn 和 Sn-1/sn 的 分 布 的 收敛 子 序列 . 


(密度 的 中 心 极限 定理 ) 证 明 : 如 果 把 充分 一 致 性 条 件 加 在 特征 函数 上 , 那么 15.5 节 


的 定理 2 可 推广 到 具有 可 变 密度 fi 的 序列 上 . 例如 , 只 要 三 阶 绝对 矩 是 有 界 的 ， 并且 
内 有 这 样 的 导数 ， 使 得 对 于 所 有 的 ,| 扩 | < M 就 行 了 . 


(三 角形 阵列 的 中 心 极限 定理 ) 对 于 每 个 nn 设 Xiun.…， Xn.n 是 多 个 具有 分 布 Pn 的 


独立 变量 . 设 Th = Xi,n 十 … 十 Xn,n 假设 E(Xk,n) = 0,E(T2) = 1, 且 对 每 个 t> 0， 


3 人 /= Fa {dr} — 0. (9.17) 


证 明 : Th 的 分 布 趋 于 多 . 提示 : 采用 15.6 节 定 理 1 的 证 明 . 


注 ” 林 德 伯 格 定理 表示 Xk,n = Xkjsn 和 Th = Sn/sn 的 特殊 情形 . 于 是 (9.17) 化 为 林 
德 伯 格 条 件 (6.3). 关于 三 角形 阵列 见 6.3 节 . 
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30. 


31. 


32. 


( 截 尽 ) 设 {Xk} 是 具有 对 称 分 市 的 独立 变量 序列 . 对 于 每 个 n 和 上 < n, 设 Xn 是 
把 Xx 在 +an 上 截 尾 得 到 的 变量 假设 > P{|Xx| > an} 一 0 且 (9.17) 成 立 . 证 


k=1 
明 : Sn/an 的 分 布 趋 于 名. 
(广义 中 心 极限 定理 ) 假设 分 布 Fi 是 对 称 的 ,并且 对 于 每 个 上 > 0， 


i 
2 Ve Fi{dz} = 0 as > a 2 的 {dz] 1. (9.18) 


利用 下 列 两 种 方法 证 明 Sn /an 的 分 布 趋 于 %i，(a) 利用 上 两 题 , (b) 仿照 15.6 节 定 理 
1 的 证 明 来 直接 证 明 . 9 


( 续 ). 对 称 性 条 件 可 以 换 成 较 弱 的 条 件 
并 / zFr{dz)}| 0. (9.19) 
k=1 | Isl<an 
,为 使 满足 条 件 (9.18) 的 正规 化 常数 an 存在 ， 当 且 仅 当 存在 一 个 tn 一 co 的 数列 , 使 
得 


Df rtar} 0 Detar} oo. 
ki Vizl<tn 要 21 al<tn 


在 这 种 情形 下 , 我 们 可 以 取 
2 = 3 2 Fe{dz}. 
Eh” st } 


(这 个 准则 通常 是 不 难 应 用 的 . ) 


@ 定理 2 可 类 似 地 推广 , 但 是 证 明 方法 不 同 . 
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本 章 的 论题 是 高 度 专门 的 问题 , 可 以 分 成 两 类 . 一 类 问题 是 获得 中 心 极限 定理 
的 误差 估计 , 并 通过 给 出 的 渐 近 展开 式 来 改进 这 个 结果 . 一 类 具有 完全 不 同性 质 的 
问题 是 对 独立 变量 的 较 大 的 值 补充 中 心 极限 定理 ， 对 这 样 的 值 古典 的 阐述 没有 意 
区 帮 

为 了 容易 理解 重要 的 定理 和 解释 基本 的 概念 ， 我 们 把 同 分 布 变量 的 情形 分 离 
出 来 . 关于 大 偏差 的 16.7 节 是 与 前 5 节 无 关 的 . 在 这 些 节 中 所 令 述 的 理论 主要 依赖 
于 两 个 方法 : 绝对 收敛 的 傅 里 叶 积分 的 直接 估计 与 磨 光 法 . 不 惜 重复 ,也 不 惜 损失 
一 些 优美 的 叙述 , 我 们 通过 首先 讨论 密度 展开 式 把 两 个 主要 的 概念 分 开 . 

本 章 的 关键 是 16.5 节 的 贝 利 - 埃 森 (Berry-Esseen) 定理 . 贝 利 (A. C. Berry) 在 
这 个 定理 的 证 明 中 首次 利用 了 16.3 节 所 述 的 磨 光 法 . 无 数 种 磨 光 程序 被 普遍 使 用 . 
事实 上 , 本 章 这 个 主题 的 长 期 和 辉煌 的 历史 有 一 个 不 幸 的 影响 , 即 历史 发 展 的 偶然 
性 仍然 影响 到 个 别 课题 的 讨论 ， 结 果 所 得 的 工具 的 多 样 性 和 方法 的 丰富 性 使 这 个 
领域 以 凌乱 而 出 名 . 下 面 我 们 系统 地 应 用 贝 利 方法 和 现代 不 等 式 , 这 使 得 整个 理论 
达到 了 惊人 的 统一 和 简化 .9 


16.1 记 号 


除了 最 后 一 节 ( 它 讨论 不 相等 分 量 ) 外 , 我 们 用 FF 表示 具有 特征 函数 p 的 一 维 
概率 分 布 . 当 大 阶 矩 存在 时 ， 它 将 被 表示 为 


十 oo 
Hk = / zkF{fdzr}. (1.1) 
我 们 假设 ja = 0, 又 照例 令 jo = o?. 我 们 记 正 规 化 了 的 n 重 卷 积 为 Fn. 于 是 
Fn(7) = F"* (zoVn). (1.2) 


当 五, 的 密度 存在 时 , 我 们 用 fh 表示 它 . 
* ”本章 讨论 专门 的 论题, 初恋 时 可 以 略 去 . 
@ H. Cramér(1962) 是 浙 近 展开 式 的 最 好 入 门 书 . 它 包 括 16.2 节 和 16.4 节 中 关于 网 分 布 变量 的 展开 


定理 及 16.7 节 定 理 的 略为 明显 的 变形 . 展开 式 定理 的 第 一 个 严格 论述 应 归功 于 克拉 美 , 但 是 他 的 方 
法 不 再 被 人 使 用 了 . Gnedenko and kolmogorov(1954) 讨论 了 16.1 节 ~16.5 节 的 材料 . 
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除了 讨论 大 偏差 的 16.6 节 外 , 我 们 将 讨论 形 如 
1 +eo i 
v9 =- 去/ “vO (13) 
的 函数 和 明显 的 估计 
1 1+eo 
kal< 去 /eol (4) 


4 和， 都 是 可 积 的 . 如 果 u 是 一 个 概率 密度 ,那么 v 是 它 的 特征 函数 . 为 了 简单 起 

见 , 我 们 引入 

约定 (1.3) 中 的 函数 u 称 为 怀 的 傅 里 叶 变 换 ,(1.4) 的 右边 称 为 4 的 傅 里 叶 范 数 
和 通常 一 样 , 正 态 密度 被 表示 为 


1 2 
az) = oe- 
n(z) Vs (1.5) 
它 的 传 里 叶 变 换 是 特征 函数 e-3¢”. 因此 , 通过 累 次 微分 , 我 们 得 到 恒等式 
dk 和 2 
rc) = 去 人 emiKz(-i)ke- 冯 d (1.6) 
对 上 = 1,2,… 成 立 . 显然 , 左边 具有 形式 
大 
Ene) = (Hl)n(e), (17) 
其 中 Hi 是 上 次 多 项 式 . Hi 被 称 为 埃 尔 米 特 (Hermite) 多 项 式 ?. 特别 
Hi(z)=z, H(z)=7?—1, Ha(z)= x?— 3z. (1.8) 


于 是 Fi 的 特性 是 Hi(z)n(z) 有 传 里 叶 变 换 (iC?)*e 6”. 


16.2 ”密度 的 展开 式 


当 某 些 高 阶 矩 jvx 存在 时 , 15.5 节 的 关于 密度 的 中 心 极限 定理 2 可 以 大 大 地 加 
强 . 一 个 重要 的 假设 是 ?对 于 菜 一 > 1， 


十 oo 
/erac<oo 人) 
@ 有 时 被 称 为 切 比 雪夫 一 埃 尔 米 特 多 项 式 . 术语 不 是 唯一 的 . 许多 正规 化 的 因 于 被 利用 , 经 常 以 ez” 
代替 我 们 的 e- =. 
@ 关于 这 个 条 件 见 15.5 节 例 (a) 和合 (b) 以 及 15.9 节 的 习题 20. 
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15.5 节 中 给 出 的 证 明 可 以 粗略 地 概述 如 下 . 差 ww = 所 一 n 有 傅 里 叶 变换 
vn(b) = (未 ) ec. (2.2) 


lvn| 的 积分 由 于 两 种 原因 趋向 于 0。 给 定 一 个 任意 小 的 但 固定 的 5 > 0， 由 于 
(2.1), lvn| 在 区 间 || > 5cV5 上 的 积分 趋 于 0. 区 |4| < jcvF 内 , 根据 yp 在 原 
点 附近 的 性 质 , 被 积 函数 vn 很 小 . 后 一 结论 只 依赖 于 pi = 0 和 ja = o? 这 个 事实 . 
当 高 阶 矩 存在 时 ， 我 们 可 以 利用 ” 的 泰勒 展开 式 中 更 多 的 项 ， 于 是 得 到 关于 收敛 
及 一 n 的 速度 的 更 精确 的 知识 . 很 遗 钱 , 当 涉及 3 个 以 上 的 项 时 , 这 个 问题 在 记号 
上 就 很 复杂 了 , 因此 我 们 分 离 出 最 简单 和 最 重要 的 特殊 情形 . 

定理 1 假设 Ha 存在 ,对 某 一 之 1,|pl* 可 积 ， 那么 对 n 之 vfn 存在 且 当 
nn 一 00 时 ， 关 于 z 一 致 地 有 


f(D) -n(n) -a 5 3z)n(z) =。( 去 ): (2.3) 
证 明 ”根据 15.3 节 的 傅 里 叶 反 演 定 理 ,对 n > v, (2.3) 的 左边 存在 且 有 傅 里 叶 范 


十 oo s 
Nn = 支 jt [|e" ( 旋 ) 一 eri2 一 OP )e-3°|ac. (2.4) 
取 5> 0 为 任意 固定 的 数 . 由 于 yp" 是 一 个 密度 的 特征 函数 , 所 以 对 于 1 人 | 关 0 我 们 
有 |Ip(O| <1, 且 当 14| 一 时 有 yp(0) 一 0(15.1 节 的 引 理 4 和 15.4 节 的 引 理 3). 
因此 , 存在 一 个 数 9, < 1, 使 得 当 [| > 6 时 , |p(0)| < gs. 于 是 区 间 [| > icv5 对 
(2.4) 中 的 积分 的 贡献 


Cp) a) mm 


这 比 1/n 的 任何 次 知 趋 于 零 的 速度 都 快 . 
利用 简化 式 9 i 
VO) = In9(6) + a0°6°, {2.6) 
因此 我 们 有 


ED) 


@ 以 后 所 用 的 复数 的 对 数 是 以 当 |z| < 1 时 成 立 的 泰勒 级 数 ln(1+z) = 本 (一 z)"/n 确定 的 . 没有 z 的 
其 他 的 值 出 现 . 
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被 积 画 数 可 以 利用 下 列 一 般 格 式 进 行 估计 . 
[ee 1B =e oe) +(e 1 Al< (lo-Al+38) oe, ea 


其 中 v > max{lal,|Bl}. (把 se 和 e8 换 成 它们 的 短 级 数 , 就 显然 可 以 看 出 , 这 个 不 
等 式 对 任意 的 实数 或 复数 a 和 6 都 成 立 . ) 

函数 少 是 3 次 可 微 的 , 并 且 (0) = (0) = (0) =0, 而 WW(0) = i3pa. 因为 
WY” 是 连续 的 ， 所 以 可 以 找到 原点 的 一 个 邻 域 [| < 65, 使 得 在 这 个 邻 域内 wy" 的 变 
化 小 于 e. 由 3 项 的 泰勒 展开 式 , 我 们 可 得 


WO - Balic)| < esc， 对 于 | < (2.9) 
此 处 我 们 选取 5 为 如 此 之 小 , 以致 于 也 有 
WO < ja262，|5aGGOa| < Jo262 对 于 Kl < Ga0) 


根据 5 的 这 种 选择 , 利用 (2.8) 可 见 (2.7) 中 的 被 积 函数 小 于 


2 3 
el 人 (KP+ 夫 人)， (2.11) 
因为 。 是 任意 的 , 所 以 我 们 有 Nn = o(1/V), 因此 (2.3) 成 立 . p 


同样 的 论证 可 导致 高 阶 展 开 式 , 但 是 它们 的 项 不 能 用 简单 的 明显 公式 表示 . 因 
此 , 我 们 推迟 研究 所 涉及 的 多 项 式 明显 构造 . 
定理 2 ”假设 给 js,… ,jr 存在 ,并 且 对 于 某 一 > 1,|pl* 可 积 . 那么 对 于 nn 之 v 存在 , 且 
当 n 一 o0 时 关于 z 一致 地 有 


fa(s) = ne) -nto) 并 -和 etaPi(a) = oln-#"+1). Ga 


此 处 及 是 一 个 只 依赖 于 jn1，… ,jk 而 不 依赖 于 n 和 (或 相反 ,依赖 于 书 ) 的 实 多 项 式 . 
前 2 项 为 


1 
蔓 Ha, (2.13) 


其 中 Hi 表示 (1.7) 中 所 定义 的 埃 尔 米 特 多 项 式 .展开 式 (2.12) 称 为 (或 者 过 去 常 称 为 )f， 
的 埃 奇 沃 思 (Edgeworth) 展开 式 . 
证 我 们 沿用 记号 (2.6). 如 果 了 是 一 个 具有 实 系数 已 , 瑟 ,… 的 多 项 式 , 那么 


五 s 十 


Ha Ha 一 3c4 
DoH P= 3 


fn—n— nzpeH: (2.14) 
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有 具有 健 里 叶 范 数 


N= 去 闪 2 ee (nw ( 志 )) Sy ptO|ac. (2.15) 


我 们 将 通过 求 出 适当 的 多 项 式 p 来 证 明定 理 1. (为 了 使 记号 简单 ,我 们 不 强调 它们 对 n 的 
依赖 性 . ) 

我 们 从 估计 被 积 函数 开始 . 程序 和 上 一 定理 的 证 明 一 样 ， 所 不 同 的 只 是 现在 我 们 利用 
纱 的 直至 7 次 项 (包括 7 次 项 ) 的 泰勒 逼近 . 这 个 逼近 将 被 表示 为 《wr(4). 于 是 yr 是 一 个 
满足 wr(0) =0 的 7 一 2 次 多 项 式 , 它 由 性 质 


(6) — Cr(6) =0(l¢l"), ¢—0 


唯一 确定 . 
我 们 现在 令 


p(6) = 和 Ew ( 专 )] (2.16) 


k=1 
于 是 p(i¢) 是 一 个 具有 依赖 于 n 的 实 系数 的 多 项 式 . 另 一 方面 , 对 于 固定 的 6,p 是 1/V5 的 
多 项 式 ， 其 系数 可 以 明显 地 表示 为 jn,y2,… ,jr 的 多 项 式 . 和 上 一 定理 中 的 证 明 一 样 ， 显 
然 对 于 固定 的 5 > 0,14| > cv 对 (2.15) 中 的 积分 的 贡献 比 1/n 的 任 一 次 短 趋 于 零 的 速 
度 都 快 ， 因 此 我 们 只 需 对 4| < 5cV5 考察 被 积 函 数 . 为 了 估计 它 , 我 们 利用 在 la| < Y 和 
18| < 7 时 成 立 的 不 等 式 [而 不 是 利用 (2.8)] 


ED | 
5 


ge (le -BI+ Gr) 。 (2.17) 


按 (2.9) 类 推 , 我 们 现在 确定 一 个 5, 使 得 当 |4| < 5 时 ， 


Iw(0) — Cyr(O| < so" 六 (2.18) 
因为 wr 中 的 ¢ 的 系数 是 ina/6, 所 以 我 们 可 以 假设 , 对 于 || < 5 也 有 


lwr(OI<akl< 1o， (2.19) 


只 要 a > 1+ |psl. 最 后 我 们 要 求 对 于 |C| < 6 


(GO < Io (2.20) 
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于 是 对 于 || < dcVf,， (2.15) 中 的 被 积 函数 小 于 


ee (于 i 


nr (ri(ovi)r 


因为 。 为 任意 的 , 所 以 我 人 有 Ns = o(n-"+1). 

于 是 我 们 求 出 了 这 样 的 依赖 于 n 的 实 系数 pe， 使 得 (2.14) 的 左边 关于 x 一 致 地 为 
oln-3"+1). 对 于 固定 的 《, 左边 是 1/V5 的 多 项 式 . 按照 1/V 的 升 吞 次 序 重 排 这 个 多 项 
式 ,我们 得 到 定理 中 所 假设 的 那 种 形式 的 表达 式 , 所 不 同 的 是 现在 的 求 和 超过 ". 但 是 可 以 
去 掉包 含 短 1/n*， 其 中 > 37 一 1 的 诸 项 . 于 是 我 们 得 到 所 需要 的 展开 式 (2.12)、 > 

因此 ， 多 项 式 把 的 明确 定义 如 下 所 述 . 一 个 一 2 次 多 项 式 订 由 在 原点 附近 成 立 的 
末 勒 公式 


mol0) =0°| -#0° + vr(O| +okm (225) 


唯一 确定 . 按照 1/V 的 壬 重 排 (2.6). 用 gk(iC) 表示 n-34+1 的 系数 . 于 是 P 是 这 样 的 一 
个 多 项 式 ,使 得 n(z) Pe(z) 有 逆 传 里 叶 变换 e345?gx(iC). 
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密度 所 的 每 个 展开 式 都 可 以 通过 积分 导致 分 布 Fn 的 一 个 类 似 展 开 式 , 但 是 
当 可 积 性 条 件 (2.1) 不 成 立时 , 这 个 简单 程序 是 不 能 用 的 . 为 了 对 付 这 种 情况 , 我 们 
应 该 间接 地 进行 (遵循 A. C. 贝 利 ). 为 了 估计 偏差 F 一 9 或 一 个 类 似 的 函数 A， 
我 们 将 利用 上 节 的 健 里 叶 方法 估计 A 的 一 个 近似 式 7A， 然 后 用 直接 方法 来 估计 
差 误 7A - A. 在 本 节 我 们 将 叙述 这 个 程序 的 基本 工具 . 

设 WW 是 具有 密度 

由 四 二 工 1 二 cosTz 
天 “下 人 
和 特征 函数 wr 的 概率 分 布 . 对 于 [| < T, 我 们 有 
“(0 =1- 屿 ， G82) 

但 是 这 个 明显 形式 并 不 重要 . 重要 的 是 , 对 于 [| > 7,wr(《) 等 于 0, 因为 这 种 情况 
排除 了 所 有 的 收敛 性 问题 . 

我 们 对 FF -8 的 界 , 更 一 般 地 对 形 如 An = Fi 一 Gn 的 函数 的 界 感 兴趣 .这 
样 的 函数 可 以 利用 它们 与 VI 的 卷 积 来 逼近 , 我 们 一 般 地 设 TA = 太 友 A. 换 句 话 
说 , 给 定 任 一 函数 A, 我 们 定义 


(3.1) 


TA(t) = / A z)or(z)dz. (3.3) 
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如 果 人 是 有 界 且 连 续 的 , 那么 当 了 一 co 时 TA 一 人. 我们 的 主要 问题 是 利用 7Al 
的 最 大 值 来 估计 |A| 的 最 大 值 . 

引 理 1 设 已 是 一 个 概率 分 布 , G 是 一 个 这 样 的 函数 , 使 得 G( 一 00) = 0,G(co) = 1， 
且 |G'(z)| 和 mm < oo. 


令 
A(z) = F(z) - G(z), (3.4) 
= suplA(z)|, nr =sup|"A(2)|, (3.5) 
那么 
和 > 了 (3.6) 


证 ”函数 A 在 无 穷 远 处 等 于 0, 单 侧 极限 A(z+) 和 A(z--) 处 处 存在 ， 从 而 在 某 
点 zo 上 或 者 |A(zo+)| = 7 或 者 |A(zo-)| = 7. 我 们 可 以 假设 A(zo) = n. 由 于 下 
不 减 , 且 G 以 速度 < m 增加 , 所 以 对 于 s > 0， 


A(zo+s)>7n—ms. (3.7) 
令 
= 到， t=zo+h, z=h—s, (3.8) 
那么 对 |z| < h, 我 们 有 
A(t—z)> 2 + mz. (3.9) 


我 们 现在 利用 (3.9) 和 |z| > 时 的 界 A(t 一 z) > -9 来 估计 (3.3) 中 的 卷 积 积分 . 由 
对 称 性 ,线性 项 的 贡献 等 于 0, 由 于 密度 vr 对 jz| > h 赋 以 质量 < 4/(xTh), 所 以 
我 们 得 到 
mr >” Alzo) > 3 zh 一 去 |- ba 去 
SD he 
在 我 们 的 应 用 中 ，G 的 导数 9 或 者 和 正 态 密度 n 重合 , 或 者 和 上 节 所 述 的 有 
限 展开 式 之 一 重合 . 在 每 种 情况 下 , 9 都 有 一 个 具有 2 次 连续 可 微 的 傅 里 叶 变 换 7， 
且 使 Y(0) =1,Y(0) = 0. 于 是 显然 卷 积 7g = 信友 g 具有 傅 里 叶 变 换 Yur. 类 似 地 ， 
根据 15.3 节 的 傅 里 时 反 演 定理 , 乘积 wor 是 代 太 的 密度 7y 的 传 里 时 变换 , 换 
句 话说 ， 
ra-7sa= 支 人 csp(0) — xOlor (Oa GD 
9 一 区 人 | 7Y orT'| 、 下 
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关于 z 积分 , 我 们 得 到 
TA(z) = 二 支 广 exz 纪 0 — 00 or(Qa. (3.12) 


没有 积分 常数 出 现 是 由 于 当 |z| 一 co 时 两 边 都 趋 于 0, 左边 是 由 于 F(z)-G(z) 一 0， 
右边 是 根据 15.4 节 的 黎 曼 - 勒 贝 格 引 理 4. 注意 到 p(0) = Y(0) = lw'(0) = 站 (0) = 
0, 从 而 被 积 函 数 是 在 原点 上 等 于 0 的 连续 函数 , 因此 不 出 现 收敛 性 的 问题 . 

我 们 从 (3.12) 得 到 nr 的 一 个 上 界 , 把 它 与 (3.6) 结合 起 来 可 得 到 7 的 一 个 上 
界 , 即 


T 5 
IP(e) -Gol< 1/ ,1 + (3.13) 


因为 这 个 不 等 式 是 下 两 节 中 所 有 的 估计 的 基础 ,所 以 我 们 扼要 重 述 它 成 立 的 条 件 . 
引 理 2 设 焉 是 一 个 具有 期 望 0 与 特征 函数 p 的 概率 分 布 . 假设 下 一 G 在 士 oo 
上 等 于 0, G 具有 一 个 使 |g| < m 的 导数 g. 最 后 假设 g 具有 一 个 连续 可 微 的 傅 里 
叶 变 换 7, 使 得 7(0) = 1Y(0) = 0. 那么 (3.13) 对 于 所 有 的 To 和 全 > 0 成 立 ， 

我 们 将 给 出 这 个 不 等 式 的 两 个 独立 的 应 用 . 在 下 节 中 , 我 们 将 推导 16.2 节 中 的 
展开 式 定 理 的 积分 形式 . 在 16.5 节 中 , 我 们 推导 偏差 及 一 名 的 著名 的 贝 利 - 埃 森 
(Berry-Esseen) 定理 . 


16.4 ”分 布 的 展开 式 
我 们 从 密度 的 展开 式 (2.3) 通过 简单 的 积分 可 得 


Fa(z) — Nz) — Ee _ 22)n(s) =0 (去 ) . (4.1) 


为 使 这 个 展开 式 成 立 , 不 需要 F 有 密度 . 事实 上 , 我 们 现在 将 证 明 (4.1) 对 除了 格 
点 分 布 ( 即 下 集中 于 形 如 5b 士 nh 的 点 集 上 时 ) 以 外 的 一 切 分 布 都 成 立 . 对 于 格子 点 
分 布 ，15.5 节 (5.12) 反 演 公 式 表明 ，F 的 最 大 跳跃 的 数量 级 为 1/ Vn， 从 而 (4.1) 
对 任 一 格 点 分 布 不 成 立 . 但 是 , 即使 对 于 格子 点 分 布 来 说 , 下 述 定理 只 需 做 很 小 的 
修正 就 仍 成 立 . 为 了 方便 起 见 , 我 们 分 2 种 情况 讨论 . 

定理 1 如 果 玉 不 是 格 点 分 布 , 并 且 三 阶 短 ja 存在 ,那么 (4.1) 对 所 有 的 z 一 致 
地 成 立 . 

证 设 


GD =) -于 他 一 Dn(o， (4.2) 
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于 是 G 满足 具有 


TO er E+ 2 和 | (4.3) 


的 上 一 引 理 的 条 件 . 
我 们 利用 具有 了 = aV 的 不 等 式 (3.13)， 其 中 常数 a 选取 为 如 此 之 大 , 以 致 
于 对 于 所 有 的 z, 24|G'(z)| < ea. 于 是 


IFn(z) 一 cols 三 Ga 


d+ 讽 - (4.4) 


因为 积分 域 是 有 限 的 ， 所 以 即使 lp| 在 整个 直线 上 不 可 积 ， 我 们 也 可 以 利用 
16.2 节 的 论证 ,我 们 把 积分 区 间 分 成 两 部 分 . 第 一 , 因为 FP 不 是 格 点 分 布 ， 所 以 由 
15.1 节 的 引 理 4, lp(6)| 在 5< IC| < ac 上 的 最 大 值 严格 地 小 于 1. 与 16.2 节 一 样 
由 此 可 推出 【| > 5cVF 的 贡献 比 1/n 的 任何 次 军 趋 于 0 的 速度 都 快 .第 二 ,根据 
对 K| < sov5 的 估计 (2.11), (4.4) 中 的 被 积 函 数 


<e3( 去 KIt 绒 (9) 


从 而 对 于 较 大 的 n, (4.4) 的 右边 < 1000e/ Vn. 因为 6 是 任意 的 ， 所 以 这 就 完成 了 
证 明 . > 

这 个 论证 对 格子 点 分 布 就 失效 了 ， 因 为 它们 的 特征 函数 是 周期 的 (从 而 |¢| > 
6oVn 的 贡献 不 趋 于 0). 尽管 如 此 , 这 个 定理 还 是 可 以 通过 一 个 考虑 到 其 格子 点 性 
质 的 自然 重 述 来 补救 . 分 布 函数 FF 是 一 个 阶梯 函数 , 但 是 我 们 将 用 具有 折线 图 形 的 
连续 分 布 函 数 F# 来 通 近 它 . 
定义 ” 设 忆 集中 于 形 如 b 土 nh 的 格子 点 上 ,但 不 集中 于 次 格子 点 上 ( 即 久 是 万 的 
步 长 ). 

五 的 折线 通 近 F# 是 一 个 具有 折线 图 形 的 分 布 函 数 ， 此 图 形 的 顶点 的 横 和 坐标 
为 中 点 二 (n+ 3) hh, 且 这 些 顶点 位 于 下 的 图 形 上 . 

因此 ， 

F#(z) = F(z)， 如 果 z=b 圭 (° 3) h; (4.5) 


F#(z) = SIF(z) 二 F(z)]， 如 果 z 二 b 土 nh. (4.6) 


于 是 FF 是 一 个 步 长 为 
加 一 二 (4.7) 
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的 格子 点 分 布 , 从 而 对 于 较 大 的 mn， 折线 逼近 于 F#, 很 接近 于 及. 
定理 2 对 于 格 点 分 布 ， 如 果 把 Fs 换 成 它 的 折线 通 近 F 豆 ,那么 展开 式 (4.1) 成 
FE 


特别 地 , (4.1) 在 Fn( 步 长 为 hn) 的 格 的 所 有 中 点 上 成 立 , 而 当 把 Fn(z) 换 成 
BF (s) + Fa(-a)) 


时 , (4.1) 在 所 有 格 点 上 成 立 . 
证 “容易 看 出 逼近 F# 和 己 与 -3h < z < 3h 上 的 均匀 分 布 的 卷 积 重合 . 因 


此 , 于 是 本 与 -3hs < = < hn 上 的 均匀 分 布 的 卷 积 , 我 们 用 G+ 表示 这 个 分 
布 与 G 的 卷 积 , 即 


hn/2 
GCAO MR (4.8) 
—hn/2 
如 果 M 表示 J]G"| 的 最 大 值 , 那么 由 G 在 点 z 附近 的 两 项 泰勒 展开 式 可 以 推出 
IG#(z) - G(z)| < 多 = o(1/n). (4.9) 
因此 , 为 了 证 明 这 个 定理 ,只 要 证 明 
IF#(z) — G#(z)| = o(1/Vn) (4.10) 
就 够 了 . 因为 取 卷 积 相当 于 把 变换 相 乘 ， 所 以 我 们 从 (4.4) 可 得 


av 和 


本 @-cxrals 上 (411) 


—aVn 


yp"(C/on) ~ 7(0) € 
| Oc + 上 ， 


其 中 (0) = (sm 3 ) / (nk) 是 均 多 分布 的 特征 函数 (4 全 所 用 的 售 计 仍 
可 应 用 , 只 是 现在 需要 重新 证 明 


是 nn 和 
人 jp"(C/on)un( Ocac = 2 2 


er) sin 刘 ray=o 人 2) (4.12) 


@ 不 把 Fn 换 为 F 玉 ,我 们 可 以 把 F 一 Fn 展开 成 傅 里 时 级 数 ， 并 把 它 相 加 便 得 (4.1) 的 右边 . 用 
这 种 方法 ,我 们 从 形式 上 得 到 了 埃 森 用 复杂 的 形式 计算 证 明 的 定理 、 例 如 ， 见 格 锂 坚 科 和 科 尔 莫 姜 
罗 夫 的 著作 . 
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根据 15.1 节 的 引 理 4 特征 函数 ”的 周期 为 2r/h。 这 对 sin 当 hy| 显然 也 正确 因 
此 ,只 要 证 明 


x/h 
人 wrwvev=。( 支 ) (413) 
就 行 了 . 但 是 , 这 显然 是 正确 的 , 因为 在 原点 的 一 个 邻 域内 |p(y)| < im ， 而 在 
这 个 邻 域 处 |p(y)| 大 于 某 一 固定 的 正 数 ， 从 而 (4.13) 中 被 积 函数 比 的 任 一 次 寡 
趋 于 0 的 速度 都 快 . 因此 , 积分 实际 上 是 o(1/n). > 
我 们 转向 高 阶 展开 式 .(4.1) 的 证 明 与 (2.3) 的 证 明 的 不 同 之 处 在 于 磨 光 ， 磨 光 说 明 在 
积分 (4.4) 中 取 积分 限 为 有 限 的 原因 . 同样 的 磨 光 可 以 应 用 于 高 阶 展开 式 (2.12), 但 是 很 明 
显 , 为 了 得 到 一 个 数量 级 为 n-3"+! 的 误差 项 , 我 们 将 必须 取 ~ anir-:. 这 就 产生 了 一 
个 困难 . (4.1) 的 证 明 依赖 于 下 列 事实 , |p(6/(oV 避 )| 在 cv < [| < 了 上 的 最 大 值 小 于 1. 
对 于 非 格子 点 分 布 , 当 人 = aVn 时 , 这 总 是 正确 的 , 但 是 当 与 n 的 某 个 高 次 等 增加 的 
速度 一 样 时 就 不 一 定 是 正确 的 . 因此 ,对 于 高 阶 展开 式 , 我们 不 得 不 引入 假设 


limsup lv(O| <1. (4.14) 


对 于 非 格 子 点 分 布 , 这 个 假设 蕴含 |p(6)| 在 |5| > 5 上 的 最 大 值 % 小 于 1. 利用 这 个 附加 的 
假设 , 对 (4.14) 详细 给 出 的 证 法 可 以 毫 无 改变 地 应 用 于 展开 式 (2.2) 且 导 致 
定理 3 如 果 (4.14) 成 立 , 并 且 乱 js,… jw 存在 ,那么 当 nn 一 oo 时 关于 z 一 致 地 有 


F(z) — NR—n(z) bp nt1Ri(z) = o(n- $+1). (4.15) 
k=3 
此 处 Rs 是 一 个 只 依赖 于 pn，.…, jr， 而 不 依 环 于 ” 和 r( 或 相反 ,依赖 于 古 ) 的 多 项 式 . 
展开 式 (4.15) 只 不 过 是 (2.12) 的 积分 形式 , 多 项 式 Re 和 (2.12) 中 的 多 项 式 以 


n(z)Pe(z) = 起 n(n) Re(z) (4.16) 


相 联 系 . 因此 ， 不 需要 重 述 它 们 的 构造 . 每 个 非 奇异 的 己 都 满足 条 件 (4.14). 

(4.15) 称 为 F 的 埃 奇 沃 思 展开 式 ， 如 果 已 具有 所 有 各 阶 的 矩 ， 那 么 人 们 可 能 可 设 
7 一 co, 但 是 对 任 一 n 结果 所 得 的 无 穷 级 数 不 一 定 收敛 ，( 克 拉美 曾 证明, 为 使 它 对 所 有 的 
nn 收敛 当 目 仅 当 et”” 关于 下 是 可 积 的 . ) 形式 上 的 埃 奇 活 思 级 数 不 应 和 埃 尔 米 特 多 项 展 
开 式 

F(z) 一 9(z) = DD crHr(z)e 4 (4.17) 
Ct 

相 混淆 . 当 F 具有 有 限期 望 时 ， 上 述 展开 式 是 收 剑 的 ,但 是 它 没有 更 深刻 的 概率 意义 例 
如 ,即使 可 以 把 每 个 到 展开 成 形 如 (4.17) 的 级 数 ， 系数 也 不 表示 收敛 及 一 外 的 速度 . 
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16.5 ” 贝 利 一 埃 森 定理 ” 


下 列 重要 定理 是 A. C. 贝 利 (Berry)(1941) 和 C. G. 埃 森 (Esseen)(1942) 发 现 
的 (他 们 的 证 明 极 不 相同 ). 
定理 1 设 Xk 是 具有 共同 分 布 玉 的 独立 变量 ,使 得 


EUOKK) =0,E(X?) = 0? > 0,E(Xk|3) = p < oo， (5.1) 
并 设 FF 表示 正规 和 


(X1+X2t+:** + Xn)/oVn 


的 分 布 . 那么 对 于 所 有 的 工 和 nn， 


IFn(z) — RN(z)| < (5.2) 


< 
这 个 不 等 式 的 显著 特点 是 ,， 它 只 依赖 于 前 三 阶 和 矩 . 展开 式 (4.1) 提供 了 一 个 更 

好 的 渐 近 估计 , 但 是 收敛 速度 依赖 于 基本 分 布 的 更 精确 的 性 质 . 右边 的 因子 3 可 以 

换 成 更 好 的 上 界 C, 但 在 我 们 这 里 并 不 企图 得 到 最 优 结果 .2 

证 证 明 将 以 带 有 下 = 及 和 G = 外 的 不 等 式 (3.13) 为 基础 , 我 们 选取 


4 4 
=3° FVi< 了 (5.3) 


后 一 不 等 式 是 矩 不 等 式 x? < p 的 一 个 推论 . [ 见 5.8 节 (o)] 因为 正太 密度 的 最 大 
值 m < 5, 所 以 我 们 得 到 


nlF,(z) — Nz)| < 三 lg"(C/ovn) ~ eI (5.4) 


上 + 
为 了 估计 被 积 函数 ,我们 注意 到 an ”pr 的 熟悉 展开 式 可 导致 不 等 式 


@ 本 节 利用 了 磨 光 不 等 式 (3.13)( 其 中 G 表示 正 态 分 布 ), 但 是 在 其 他 方面 却 是 与 上 节 无 关 的 . 

@ 足利 给 出 了 一 个 界 C < 1.88, 但 是 已 发 现 他 的 计算 有 错误 埃 森 给 出 了 C < 7.59. 据说 经 过 未 发 
表 的 计算 得 到 了 C < 2.9(Esseen, 1956) 和 C < 2.05(D. L. Wallace 1958). 我 们 的 精简 了 的 方法 
得 到 了 一 个 非常 好 的 界 ,， 它 避免 了 通常 凌乱 的 数值 计算 .不 改进 (3.13) 中 的 误差 项 24m/x, 就 不 能 
希望 有 本 质 上 的 改进 . 
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leo"-B"|<nla-Bl-y"!， 如 果 lal<7lol<7 (5.5) 
我 们 对 于 a = P(C/cv 同 和 6 =e-3/" 利用 上 述 不 等 式 . 从 15.4 节 (4.1) 关 于 et 
的 不 等 式 , 我 们 有 
vl) -1+ B02| =| 三 (ee= 1-its+ Be)P{dr)| < Sol, (5.6) 
从 而 
lp <1— Soe + kt， 如 果 Bo sl (5.7) 
我 们 断言 , 对 于 | 人 | < 了， 


p 
po 
<1- Ee < e- 吉 6/n. (5.8) 


Ip(C/ova) <1— BC+ 


因为 ca < p， 所 以 定理 的 断言 对 于 Vi < 3 显然 是 正确 的 ， 从 而 我 们 可 以 假设 
n 之 10. 于 是 


Ip(C/ovD I < et6’, (5.9) 


右边 可 以 作为 (5.5) 中 的 界 y"!. 注意 到 对 于 z > 0,e 于 一 1+zsR je 我 们 就 可 
以 从 (5.6) 得 到 


(oem 6 
起 ) <"|(z) Ytan 


elc/n C 3 1 
+ 中 订 -。 < + (5.10) 


因为 Vn > 3, 所 以 由 (5.5) 和 (5.9) 可 以 推出 (5.4) 中 的 被 积 函数 


< (e+ ) ee (5.11) 

这 个 函数 在 -co < 5 < co 上 是 可 积 的 , 于 是 简单 的 分 部 积分 表明 
ATIF,(z) — ND)| < BV 二 3 +10. (5.12) 
因为 Vi < ,所 以 右边 < 二 < 4m, 因此 (5.2) 成 立 > 


本 定理 及 其 证 明 可 推广 到 具有 可 变 分 布 的 序列 {X#} 如 下 . 
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定理 29 设 Xi 是 独立 变量 , 使 得 
E(Xk)=0, E(XE)=og, E(XEl)= 
令 


=00++o2, rn = pi1+ + pn 
用 Fn 表示 正规 和 (Xi 十 … 十 Xn)/sn 的 分 布 , 那么 对 于 所 有 的 工 和 n， 


Tn 
|,(o) -mo)| < 6 加 


证 如 果 wx 表示 X( 的 特征 函数 , 那么 开始 的 不 等 式 (5.4) 现在 应 换 成 


snc/ (和 “(的话 
这 次 我 们 选取 
7= .至 . 


代替 (5.5), 我 们 现在 用 当 lax| < ye 和 |Bk| < Ys 时 成 立 的 不 等 式 
Iairan -bibn| < Dm 一 Bink+1 mn: 
这 个 不 等 式 将 被 应 用 于 、 
ok = wx(C/sn),Bk = -#2/s2), [| <T. 


按 (5.8) 类 推 , 我 们 有 , 车 okT < snV2, 则 


/al <1- 江 0+ 铝 -KP<em(- 切 + 全) 
为 了 得 到 一 个 对 一 切 者 适用 的 界 me， 我们 把 系数 二 换 为 3， 并 令 


@ 应 归功 于 埃 森 (他 的 证 明 方法 与 我 们 完全 不 同 ) 


(5.13) 


(5.14) 


(5.15) 


(5.16) 


(5.17) 


(5.18) 


(5.19) 


(5.20) 


(5.21) 


16.5 贝 利 一 埃 森 定理 487 


显然 , |Bk| < Ys 由 (5.20) 知 ， 对 于 使 得 oT < 3 的 大 也 有 |ax| < Ys. 但 是 ， 
由 矩 不 等 式 pk > cg 可 以 推出 , 如 果 okT > 4 那么 办 > 1. 从 而 对 于 所 有 的 
k, |ak| < Yk 

当 (5. 区 的 看 > > 和 时 即 ra/s3 > 二 时 ， 本 定理 显然 成 立 . 四 此 我 们 今后 假 
设 rn/s3 < = 了 或 T> 至 Tk 的 最 小 他 在 条 -使 og/sn < 4/3T < 二 3 的 大 上 达到 , 从 
而 对 于 所 有 的 Ye > er 132. 于 是 最 后 有 ， 


1 3rnT 1 C2 
[eit Yn) < exp 人 2 (3 市 5 十 去 ) < er /18. (5.22) 


按 (5.8) 类 推 , 我 们 可 得 


De lox 一 Bl < 牙 二 | +Bx 所 (5.23) 
k=1 Dk=l 
为 了 估计 最 后 这 个 和 , 我 们 回忆 of < 赔 < 嘻 .px, 从 而 
得 各 
1 Tn 1 rn Srn 
RS () < 可 <0 了 8 (5.24) 
这 些 不 等 式 表明 , (5.16) 中 的 被 积 函数 
< 襄 ( + ) em (5.25) 
从 而 最 后 有 总 
aTIFn(z) ~ NR(z)| < V+ 豆 64 十 9.6. (5.26) 


右边 < 16n/3, 因此 (5.26) 蕴含 (5.15). 

现在 人 们 非常 注意 贝 利 - 埃 森 定理 向 无 三 阶 抢 的 变量 推广 ， 于 是 上 界 被 的 
分 数 矩 或 某 一 有 关 的 莽 ， 卡 兹 (M. L. Katz)(1963) 在 这 个 方向 上 迈 出 了 第 一 步 . 通 
常 的 计算 是 凌乱 的 , 一 直 没 人 努力 去 寻找 适用 于 各 种 变形 的 统一 方法 . 我 们 的 证 明 
就 是 为 此 而 给 出 的 ， 并 且 为 使 它 包括 更 广 的 范围 ,可 以 重新 予以 叙述 . 实际 上 , 三 
阶 和 矩 在 证 明 中 的 出 现 只 是 由 于 利用 了 不 等 式 


1 
eic — 1—itz+ 2 < BltzF. 


实际 上 只 须 在 某 一 有 限 区 间 |z| < a 上 利用 这 个 估计 , 在 其 他 情况 下 用 界 zz2 就 足 
够 了 . 这 样 我 们 就 可 得 到 下 列 奥 西 波 夫 (L. V. Osipov) 和 彼得 罗 夫 (V. V. Petrov) 用 
其 他 方法 得 出 的 具有 未 定常 数 的 定理 . 
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定理 3 ”假设 定理 2 的 条 件 成 立 (除了 三 阶 乱 不 一 定 存 在 外 )， 那 么 对 于 任意 的 
从 > 0， 


IF(z) -ozl<6 人 [zBF{dz} + sz / eta (5.27) 
|zlsrx zl>rx 
利用 简单 的 截 尾 法 ,我们 可 以 把 这 个 结果 推广 到 没有 和 抢 的 变量 上 .9 


16.6 ”在 可 变 分 量 情形 下 的 展开 式 


16.2 节 和 16.4 节 的 理论 容易 推广 到 具有 可 变 分 布 Ui 的 独立 变量 序列 {X%} 
上 . 事实 上 , 我 们 的 记号 和 论证 就 是 为 此 而 准备 的 , 因而 不 总 是 最 简单 的 . 
设 ECXk) = 0 和 ECXR) = o2. 我 们 照例 令 2 = of 十 …+02. 为 了 保持 连续 性 ， 
我 们 仍 设 ,也 表示 正规 和 (Xi 十 … + Xn)/sn 的 分 布 . 
为 了 让 概念 确定 起 见 ， 我 们 考虑 一 项 展开 式 (4.1)、 左边 现在 有 显然 的 类 似 表 
达 式 本 
Dn(z) = Fn(z) — RN(z) — 人 (oh (6.1) 
其 中 
1 = DE(XE). (6.2) 
k=1 


在 相等 分 其 的 情形 下 已 证 明了 Dn(z) = o(1/ VD). 于 是 D,, 是 各 个 误差 项 之 和 , 在 
现在 的 情形 下 , 这 些 误 差 项 不 一 定 有 可 比较 的 数 基 阶 . 事实 上 , 如 果 X 有 四 阶 矩 ， 
那么 可 以 证 明 , 在 较 弱 的 附加 条 件 下 ， 


IDn(z)| = O(n?s7®) + O(nsa). (6.3) 
此 处 这 两 项 中 哪 一 项 占 优势 ， 取决 于 序列 nsa? 的 性 质 , 这 序列 可 以 在 0 和 oo 之 
间 变动 . 从 理论 上 讲 , 可 以 求 出 误差 的 泛 界 ,? 但 是 在 实际 中 产生 的 各 种 特殊 情况 下 


@ 关于 细节 见 W. Feller, On Berry 一 Esseen theorem, Zs. Wahrscheinlichkeitstheorie verw. 
Gebiete, vol 10(1968) pp.261-268. 出 乎 意料 的 是 ,即使 在 古典 的 情形 下 , 统一 的 一 般 方 法 实际 
上 也 简化 了 论证 , 而且 不 难 导致 更 好 的 数值 估计 . 

@ 例如 在 克拉 美 基本 理论 中 , 界 具 有 下 列 形式 ， 


=o 人 (om 伺 eC)) 


这 可 能 比 (6.3) 更 坏 - 
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这 样 的 泛 界 非常 凌乱 且 极 难 求 出 . 因此 , 较 愤 重 的 是 只 考虑 具有 一 些 典型 性 质 的 序 
列 {Xk}, 但 是 要 使 证 明 如 此 灵活 ,以 致 在 各 种 情况 下 都 能 应 用 . 

作为 典型 的 模型 , 我们 考虑 这 样 的 序列 , 使 得 比 s2/n 界 于 两 个 正 数 之 间 ?. 我 
们 将 证 明 ,在 较 弱 的 附加 条 件 下 展开 式 (4.1) 仍然 成 立 , 它 的 证 明 无 需 改 变 . 在 其 
他 情况 下 ,误差 项 可 取 不 同 的 形式 . 例如 , 如 果 只 = o(n), 那么 只 能 有 |Dn(z)| = 
o(n/s3). 但 是 , 证 明 可 适用 于 这 种 情况 . 

(4.1) 的 证 明 依 赖 于 取 Dn(z) 的 传 里 叶 变 换 . 如 果 wx 表示 Xx 的 特征 函数 , 那 
么 这 个 变换 可 以 写成 如 下 形式 : 


pm . 
Eronl/sn) — e-36* — nO ei (6.4) 


其 中 
vn(6) = Dnwr(O). (6.5) 
k=1 


于 是 ,这 恰好 与 (4.1) 的 证 明 中 所 用 的 形式 相同 ， 所 不 同 是 在 那里 vn(¢) = Inp(C) 
与 无关, 现在 我 们 来 看 此 式 对 n 的 依赖 性 怎样 影响 证 明 . 这 里 只 用 到 v 的 两 个 
性 质 . 

(a) 我 们 利用 三 阶 导数 yp” 的 连续 性 来 找 一 个 区 间 (|¢| < 56), 使 得 在 此 区 间 内 
ww 的 变化 小 于 s. 为 了 保证 这 个 5 的 选择 可 以 与 n 无 关 , 在 原点 附近 加 一 个 关于 
导数 wk 的 一 致 性 条 件 . 为 了 避免 无 趣味 的 技巧 性 讨论 ， 假设 矩 E(X$) 存在 且 有 
界 . 于 是 , wk' 具有 一 致 有 界 导数 , 这 对 wv 也 成 立 . 

(b) (4.1) 的 证 明 依赖 于 如 下 事实 ， 对 于 所 有 的 《 > 6 一 致 地 有 |p"(6)| = 
o(1/ Vi). 于 是 类 似 的 事实 是 : 

在 6>6>0 上 一 致 地 有 ， 


loa(G wn(O)| = o(1/ Vn). (6.6) 


这 个 条 件 排除 了 这 样 的 可 能 性 ， 即 所 有 的 Xi 具有 相同 步 长 的 格子 点 分 布 ，( 在 这 
种 情形 下 ，(6.6) 中 的 乘积 是 ¢ 的 周期 函数 . ) 另外 , 条 件 是 如 此 之 低 , 在 大 多 数 情 
形 下 都 被 满足 . 例如 ,如 果 Xi 有 密度 ,那么 所 有 的 因子 lwx| 取 1 以 外 的 有 界 值 ， 
而 且 除非 lwn(4)| 一 1( 即 X。 趋 于 集中 于 一 点 上 )，(6.6) 的 左边 比 1/n 的 任何 次 宕 
趋 于 0 的 速度 都 快 . 因此 , 一 般 情形 下 , 以 下 这 个 较 强 的 条 件 是 满足 的 , 并且 对 于 
4 > 0 情形 是 容易 验证 的 : 


@ 于 是 , (6.3) 给 出 |Dn(z)| = O(1/n), 这 比 (4.1) 中 所 得 到 的 界 更 精确 ， 之 所 以 能 得 到 这 个 改进 ， 
是 因为 有 四 阶 和 矩 存在 这 个 假设 . 
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li(O)…wn(O)|= oln“) 在 5 > 6 上 一 致 成 立 . (6.7) 


在 上 述 两 个 假设 下 , (4.1) 的 证 明 可 以 毫 无 改变 地 照搬 过 来 , 于 是 我 们 有 
定理 1 假设 对 于 所 有 的 n 和 某 些 正常 数 有 ， 


cm <s2 < cn，E(X2) < M, (6.8) 
且 (6.6) 式 成 立 ， 则 对 于 所 有 的 z 一 致 地 有 
IDn(2)| = o(1/Vn). 
如 前 所 述 , 这 个 证 明 可 适用 于 其 他 情形 . 例如 , 假设 


sm 一 0， 但 sj/m 一 oo. (6.9) 


令 T=as3/n, 则 (4.1) 的 证 明 可 照搬 过 来 . 因为 了 = o(sn),， 所 以 条 件 (6.6) 就 成 为 
不 必要 的 , 这 样 我 们 得 到 下 列 的 变形 . 
定理 la 。 如果 (6.9) 成 立 ， 并 且 EE(Xh) 是 一 致 有 界 的 ， 那 么 关于 z 一 致 地 有 
|Dn(z)| = o(n/s3). 

16.2 节 和 16.3 节 的 其 他 定理 可 以 用 同样 的 方式 进行 推广 . 例如 , 16.4 节 定 理 3 
的 证 明 不 经 本 质 上 的 改变 就 可 导致 下 面 的 一 般 展 开 定理 .? 
定理 2 假设 (6.7) 对 a=7r 十 1 成 立 , 且 


0<c<E(X|)<C<o%, v=1,.…,r+l, (6.10) 


则 渐 近 展开 式 (4.15) 关于 z 一 致 成 立 . 
多 项 式 局 依赖 于 (6.10) 中 出 现 的 矩 ， 但 是 对 于 固定 的 x, 序列 {Rj(z)} 是 有 
界 的 . 


16.7 大 偏 差 ” 


我 们 从 具有 共同 分 布 FF 且 使 得 E(Xi) = 0,E(X%) = o? 的 特殊 情形 开始 考虑 我 
们 的 一 般 问题 . 与 以 前 一 样 ,Fn 表示 正规 和 (Xi 十 … 十 Xn)/oVn 的 分 布 . 于 是 及 
趋 于 正 态 分 布 外 . 这 个 结果 对 z 的 适当 的 值 是 有 价值 的 , 但 是 对 于 较 大 的 z, Fn (x) 
和 gt(z) 都 接近 于 1, 中 心 极限 定理 就 没有 意义 了 . 类 似 地 , 大 多 数 展开 式 和 逼近 就 
成 为 多 余 的 了 . 我 们 需要 一 个 以 1 一 饼 逼近 1- F 的 相对 误差 估计 , 我 们 将 多 次 利 
用 在 > 和 两 者 都 趋 于 无 穷 情况 下 的 关系 式 


@ 在 稍为 弱 一 点 的 一 致 性 条 件 下 , 这 个 定理 已 包含 在 克拉 美的 先驱 著作 中 . 但 是 克拉 美的 方法 已 经 过 时 . 
@ 本 节 内 容 与 本 章 前 面 各 节 无 关 - 
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1~— Fn(z) 
Tm + (7.1) 


这 个 关系 式 一 般 说 来 不 成 立 , 因为 对 于 对 称 的 二 项 分 布 , 分子 对 于 所 有 的 > > Vn 
等 于 0. 但 是 我 们 将 证 明 , 如 果 z 随 着 n 变化 , 使 得 z 一 oo, 且 rn 到 一 0, 那么 
(7.1) 成 立 , 只 要 积分 


+o0 
10= /ertar} (72) 


对 某 个 区 间 |4| < Go 上 的 所 有 都 存在 . [这 相当 于 说 , 特征 函数 p(C) = f(il) 在 原 
点 的 一 个 邻 域内 是 解析 的 , 但 是 最 好 处 理 实 函 数 f. ] 
定理 1 如 果 积分 (7.2) 在 原点 附近 的 某 个 区 间 内 收敛 , 且 工 随 着 nn 这 样 变化 , 使 
得 z 一 oo 且 z=o(n 寺 )， 那么 (7.1) 成 立 . 

把 z 换 成 -z, 我 们 得 到 关于 左 尾部 的 对 偶 定 理 , 大 概 此 定理 相当 一 般 , 足以 
包含 “具有 实际 价值 的 一 切 情况 ”, 但 是 证 明 方 法 可 导致 更 强 的 结果 . 

为 了 证 明 , 我 们 不 讨论 f 而 讨论 它 的 对 数 . 在 原点 的 一 个 邻 域内 ， 


WO) =nf(O) = 避暑 4 (73) 


确定 了 一 个 解析 函数 . 系数 办 只 依赖 于 分 布 FF 的 矩 jn,… ,pxs 并 称 为 已 的 k 阶 
半 不 变量 . 一 般 说 来 , 1 = ju,w2 = 02,…. 在 现在 的 情形 下 , ja = 0, 因此 如 = 
0,y2 = 02, 3 = Ha 

证 明 是 以 相伴 分 布 的 技巧 为 基础 的 .9 我 们 把 分 布 F 和 这 样 的 一 个 新 概率 分 布 
V 联系 起 来 , 使 得 


V{fdz} =e-?()e’ FP{dz}, (7.4) 
其 中 参数 s 是 在 消 的 收敛 区 间 中 选取 的 . 函数 
(C+s) 
v(0) = fe) (7.5) 


对 了 所 起 的 作用 和 f 对 原来 的 分 布 F 所 起 的 作用 相同 . 特别 通过 微分 (7.5) 可 推 
出 VV 的 期 望 为 wW(s), 方差 为 w'(s). 

证 明 的 思路 现在 可 以 粗略 地 说 明 如 下 : 容易 从 (7.4) 或 (7.5) 看 出 , 分 布 F"* 
和 Y"* 又 有 关系 式 (7.4), 所 不 同 的 是 现在 应 把 正规 化 常数 e-*() 换 成 e-"y(9. 把 
这 个 关系 式 反 演 , 我 们 得 到 


1— Fn(2)=1— F"*(zoVn) =e™(®) 站 汪 eVn 坟 {dg]. (7.6) 


@ 它 曾 应 用 于 11.6 节 更 新 理论 和 12.4 节 随 机 游 动 . 


492 第 16 章 与 中 心 极限 定理 有 关 的 展开 式 


由 中 心 极限 定理 , 在 这 里 似乎 自然 可 以 把 Y"* 换 成 相应 的 期 望 为 nyW'(s), 方差 
为 nw”(s) 的 正 态 分 布 . 如 果 下 积分 限 接近 于 V"* 的 期 望 , 即 > 接近 于 (s)Vn/o， 
那么 这 个 逼近 中 产生 的 相对 误差 很 小 ”这 样 我 们 可 以 对 z 的 某 些 较 大 的 值 推导 
1 一 Fn(z) 的 较 好 的 近似 , 并 且 (7.1) 就 在 其 中 . 
证 在 原点 的 一 个 邻 域 内 , 是 具有 形 如 


yp(s)=1+5 a 82 十 Bs 十 ， (7.7) 


的 竺 级 数 的 解析 函数 , % 是 一 个 满足 儿 (0) = 0 的 凸 函数 ， 从 而 对 s > 0 是 递增 的 . 
因此 , 只 要 把 * 和 z/V 局 限于 原点 的 一 个 适当 邻 域 ,关系 式 


Vmy'(s)=oz，s>0，z>0 (7.8) 


就 在 变量 。 和 z 之 间 建 立 了 一 一 对 应 . 每 个 变 基 都 可 看 作 是 另 一 个 变量 的 一 个 解 
析 函 数 . 显然 ， 


s~ pi 如 果 -大 一 0 (7.9) 


我 们 分 两 步 进行 . 
(a) 我 们 首先 计算 把 (7.6) 中 的 Y"* 换 成 具有 相同 的 期 望 ny'(s) 与 相同 的 方 
差 nw"(s) 的 正太 分布 所 得 的 其 4。 利用 标准 的 代 换 y = ny/(s) +tVW"(s) 可 得 


六 二 or / ™ -ta Vv dt. (7.10) 
在 指数 中 平方 我们 得 到 
4 人 (oa -w+jwa) amv oa 
指数 及 其 前 二 阶 导数 在 原点 上 等 于 0， 从 而 它 的 每 级 数 从 三 次 项 开始 . 于 是 


= [1 一 9(sVnw(e [1L+Ons3)]，s 一 0. (7.12) 


如 果 nss 一 0, 或 者 换 一 个 说 法 , 如 果 z = o(n3), 那么 我 们 可 以 把 (7.12) 改写 成 形 
式 

A, = [1 — Na + O(z3/ Va]. (7.13) 
。 为 了 简单 起 见 ， 我 们 令 
£ = sVT7 (7.14) 
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剩 下 的 只 要 证 明 在 (7.13) 中 我 们 可 以 把 z 换 为 z 就 行 了 . (5 一 x)/n 的 特级 数 与 
无 关 , 简单 的 计算 说 明 它 从 三 次 项 开始 . 因此 ， 


Ii—z|= O(Vns’) = O(z3/n). (7.15) 
我 们 由 第 1 卷 7.1 节 , (1.8) 可 知 , 当 t 一 co 时 ， 
n(t) 


II i (7.16) 
在 > 和 元 之 间 积 分 , 我 们 得 到 , 当 z oo 时 ， 
[n= oe- =0(s/m), (17) 
从 而 
HR =1+ ol/m), (7118) 


代入 (7.13), 我 们 最 后 得 到 , 如 果 2 一 co 使 得 > = o(n#), 那么 
hs = [1— RE + O(z3/ VR)]. (7.19) 


(b) 如 果 ,表示 期 望 为 nw'(s), 方差 为 ny"(s) 的 正 态 分 布 , 那么 4。 表示 当 
把 V"* 换 成 NM 时 (7.6) 的 右边 . 我 们 现在 来 估计 由 这 种 代 换 所 产生 的 误差 . 根据 
贝 利 - 埃 森 定理 (第 5 节 ), 对 于 所 有 的 y， 


IV™*(y) — Rs (YW)| < 3Mso 3/ Vn, (7.20) 


其 中 M。 表示 分 布 Y 的 三 阶 绝对 矩 , 因此 , 经 过 简单 的 分 部 积分 后 可 以 看 出 ， 


1 -F(z)— 4s| < 3 ee bd + 人 co 
Vn ay'(s) 
es 2 enly(s) -sy (a)]. (7.21) 
但 是 根据 (7.11)， 
As = rt) -a0 (0) .ea — RD] ~ Be") -ew (7.22) 


从 而 (7.21) 的 右边 是 4,. O(z/ Vn). 于 是 


1— Fn(z) = As[l + O(z/Vn)]. {7.23) 
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与 (7.19) 结合 起 来 , 这 不 仅 证 明了 本 定理 , 而且 还 证 明了 更 强 的 
系 如 果 z 一 oo 使 得 z=oln#), 那么 


志和 -+o( 另 ). (7.24) 


我 们 间接 地 推导 出 了 一 个 更 进一步 的 结果 . 当 z 随 着 nn 这样 变化 , 使 得 = oo 但 是 
= = o(Vi 时 就 可 应 用 此 结果 . 实际 上 ,根据 (7.23), 我 们 此 时 有 1 一 F(z) ~ 4 其 中 A。 
由 (7.11) 给 出 . 此 处 匈 的 自 变量 是 z, 但 是 (7.18) 表明 5 可 以 换 为 z， 因此， 我 们 得 到 一 
般 的 通 近 公式 
1-Fl0) = op (ns) av) + B09) ) 
-0 Ro)] (1+ OGz/v (7.25) 


指数 是 一 个 s 从 三 阶 项 开始 的 短 级 数 . 和 在 (7.8) 中 一 样 , 我们 现在 用 W(s) = oz 定义 一 
个 变量 z 的 解析 函数 s. 对 于 这 个 函数 ,我 们 定义 一 个 塞 级 数 和 ,使 得 


22A(] = A + ss te = be) sb (8) + BY?(s). (7.26) 


利用 这 个 级 数 ， 我 们 有 
定理 29 如 果 在 定理 1 中 把 条 件 工 一 o(n 直 ) 换 成 z 二 o(VV， 那么 


多 -wo 说 


特别 地 , 如果 = = o(n), 那么 在 短 级 数 中 只 有 第 一 项 起 作用 ,我 们 得 到 


1— Fn 和 az3 
于 人 ~ew( 法)， AN = 把. (7.28) 


当 z = oln 疝 ) 时 我 们 得 到 


1— Fn(z) z 
~ 人 


2 4 _ 2 加 一 343 
于 +XE)，x = 区 二 风 ， C29) 


@ 把 变换 (7.4) 应 用 到 与 中 心 极限 定理 有 关 的 问题 ， 似 乎 应 归功 于 F. 埃 斯 切 尔 (Esscher) (1932). 
本 定理 应 归功 于 克拉 美 (1938), 并 被 费 勒 (1943) 推广 到 可 变 分 量 上 去 . 关于 这 方面 的 较 新 结果 , 见 
V. V. Petrov, Uspekhi Matem、Nauk, vol.9(1954)( 俄 文 版 ) 和 W. Richter, Local limit theo- 
rems for large deviations, Theory of Probability and Its Applications( 译 文 )， vol.2 (1957) 
PP.206-220. 后 一 作者 讨论 的 是 密度 而 不 是 分 布 ， 关 于 导致 形 如 1 一 Fn(z) = exp[e(z) 十 ofu(z))] 
的 逼近 的 另外 一 种 方法 ， 见 W. Feller, Zs. Wahrscheinlichkeitstheorie verw. Gebiete vol.14 
(1969) pp.1-20. 
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等 等 . 应 注意 到 ,右边 可 以 趋 于 0 或 co， 从 而 这 些 公式 并 不 蕴含 1 一 Fn(z) 和 1 一 R(z) 的 
产 近 等 价 性 . 只 有 当 z = o(n$) 时 (或 者 在 三 阶 矩 等 于 0 的 情形 下 , 当 z = oln3#) 时 ) 才 存 
在 这 一 等 价 关系 . 在 任何 情形 下 ,我 们 有 下 列 有 趣 的 

系 ”如 果 z= olv 科 ,那么 对 任 一 = > 0, 最 终 有 


exp(—(1 + e)z°/2) < 1— Fn(z) < exp(-(1 一 ez2?/2). (7.30) 


上 述 理论 可 以 推广 到 包含 具有 可 变 分 布 和 特征 函数 wi 的 随机 变量 Xi 的 部 分 
和 的 情形 . 这 个 程序 可 以 用 定理 1 的 如 下 推广 来 说 明 , 在 定理 1 中 一 致 性 条 件 太 强 . 
其 路, 仍 表示 正规 化 和 (Xi 十 … 十 Xn)/sn 的 分 布 . 
定理 3 假设 存在 一 个 区 间 =a,G, 使 得 所 有 特征 函数 wk 在 其 中 是 解析 的 ,并 假设 


E(|Xn|3) < Mo?, (7.31) 


其 中 M 与 nn 无 关 . 如 果 sn 和 了 按 这 样 的 方式 趋 于 co， 使 得 工 一 o( 晤 )， 那 么 有 


1— Fn(7) 
TI) 


1, (7.32) 


误差 为 o(23/sn). 
证 明 是 相同 的 ， 只 是 现在 要 把 少 换 为 对 -a< s<a 由 


yn(s) = 2 Dlnen(-is) (7.33) 
k=1 


定义 的 实 值 解析 函数 . 在 形式 计算 中 , 现在 用 zsn 代替 zo Vn. 基本 方程 (7.8) 呈 
Wn(s) = zsn/n 的 形式 . 
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本 章 讨论 概率 论 的 古典 极限 定理 的 核心 内 容 一 一 无 数 多 个 知识 的 小 溪 和 发 展 
汇 成 的 知识 宝库 . 这 个 主题 的 最 经 济 的 论述 是 从 17.7 节 所 述 的 三 角形 阵列 开始 , 但 
是 我 们 还 是 从 简单 的 特殊 情形 开始 ,以 便 容易 理解 各 种 重要 的 课题 . 

无 穷 可 分 性 、 稳定 性 等 概念 及 其 直观 意义 曾 在 第 6 章 中 讨论 过 . 本 章 的 主要 结 
果 曾 以 不 同 的 形式 、 用 不 同 的 方法 在 第 9 章 中 导出 过 , 但 是 本 章 的 讨论 将 更 详细 
些 . 它 是 自给 自足 的 , 并 且 可 以 作为 第 15 章 (特征 函数 ) 的 续篇 来 进行 学 习 , 它 与 
前 面 各 章 无 关 . 


17.1 无穷 可 分 分 布 


我 们 沿用 习惯 做 法 , 利用 对 分 布 及 其 特征 函数 可 交换 的 描述 性 术语 . 按照 这 种 
理解 ,6.3 节 中 给 出 的 无 穷 可 分 性 定义 可 以 重新 叙述 如 下 . 
定义 ”特征 函数 w 是 无 穷 可 分 的 ， 当 且 仅 当 对 于 每 个 mn， 存在 一 个 特征 函数 wn， 
使 得 


n= Ww. (1.1) 


我 们 将 很 快 看 到 无 穷 可 分 性 可 以 用 其 他 性 质 来 刻 划 ,这 说 明 为 什么 这 个 概念 
在 概率 论 中 能 起 重要 的 作用 . 
关于 特征 函数 的 根 与 对 数 的 注 ”人 们 可 能 很 想 把 (1.1) 中 的 wn 称 为 w 的 ”次 
根 , 但 是 为 使 这 个 说 法 有 意义 , 我们 需要 证 明 这 个 根 在 本 质 上 是 唯一 的 . 为 了 在 复 
域 上 讨论 根 与 对 数 的 不 确定 性 ， 从 复数 a 取 0 的 极 坐标 表达 式 a = rei 开始 将 
是 很 方便 的 . 正 数 7 是 唯一 确定 的 , 但 是 只 有 当 把 任意 两 个 差 为 2r 的 整数 倍 的 数 
看 作 一 样 时 ， 辐 角 9 才 是 确定 的 . 原则 上 讲 ， 这 种 不 确定 将 被 na = lnr + ig 和 
an” = rl/meb/m 所 继承 (此 处 rY” 表示 正 根 , In7 表示 普通 的 实 对 数 ). 虽然 如 此 ， 
但 是 在 使 w(C) 关 0 的 任 一 区 间 |4| < lo 内 ,特征 函数 w 有 唯一 的 极 坐标 表达 式 
w(6) = 7(C) .e90), 使 得 6 是 连续 的 且 9(0) = 0. 在 这 样 的 区 间 上 , 我 们 可 以 明确 地 
记 Inw(6) = Inr(C) +ig(O),wV"(G) = rm(C)ex9(O/" 这 些 规定 是 使 nw 和 wl/" 为 
连续 函数 且 在 4 = 0 时 为 实数 的 唯一 规定 . 在 这 个 意义 上 , mw 和 wi/" 在 不 包含 
的 零点 的 任 一 区 间 |C| < bo 内 是 唯一 确定 的 . 我 们 将 只 在 这 个 意义 上 利用 符号 mnw 
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和 wl/", 但 是 必须 记 住 , 一 旦 w(Go) = 0, 这 个 定义 就 无 法 使 用 了 . p 

设 下 是 任意 一 个 概率 分 布 , p 是 它 的 特征 函数 . 由 15.2 节 , (2.4) 我 们 知道 , 也 
产生 一 族 具有 特征 函数 est9- 3 的 复合 泊 松 分 布 

oD Spe. (1.2) 
k=0 

此 处 c > 0 是 任意 的 . 显然 , w = ee(-0 是 无 穷 可 分 的 (因为 根 wi" 与 w 的 形式 相 
同 , 所 不 同 的 只 是 要 把 c 换 为 c/n). 正 态 分 布 和 柯 西 分 布 表 明 , 无 穷 可 分 分 布 不 一 
定 是 复合 泊 松 类 型 的 , 但 是 我 们 现在 将 证 明 , 每 个 无 穷 可 分 分 布 都 是 一 个 复合 泊 松 
分 布 序列 的 极限 . 整个 理论 的 基础 是 
定理 1 设 {pn} 是 一 个 特征 函数 序列 . 为 使 存在 一 个 连续 的 极限 


w(0) = lim pn(O), (1.3) 
当 且 仅 当 
mlpn() 一 了 一 VC)， (1.4) 
其 中 少 是 连续 的 . 在 这 种 情形 下 ， 


由 一 ery. (1.5) 


证 我 们 回忆 一 下 15.3 节 中 的 连续 性 定理 . 如 果 一 列 特征 函数 收 傅 于 一 个 连续 函 
数 , 那么 后 者 是 特征 函数 , 并 且 收敛 性 在 每 个 有 限 区 间 上 自然 是 一 致 的 . 

(a) 我 们 从 定理 的 较 容易 的 部 分 开始 . 假设 (1.4) 成 立 , 其 中 消 是 连续 的 这 列 
会 对 于 4,pn(6) 一 二 并 且 收 敛 在 有 限 区 间 内 自然 是 一 致 的 . 这 就 是 说 , 在 任 一 区 间 
人 | < 6 内, 对 于 充分 大 的 nn 我 们 有 |1 一 pn(6)| < 1 其 次 , 对 这 样 的 n, 由 In(1 一 z) 
的 泰勒 展开 式 可 知 ， 


ningn(6) = mln(l ~ [1 — pn(O)) 

= -nl — pn(O] — 20 — pn( OF —.. (1.6) 
由 (1.4) 知 , 右边 第 一 项 趋 于 一 %(6)， 因 为 pn(C) 一 1， 所 以 这 歼 含 所 有 其 他 的 项 者 
趋 于 0. 因此 , ninypn 一 -或 者 gr 一 er% 正如 所 断言 的 那样 


(b) 如 果 已 知 (1.3) 中 的 极限 w 没有 零点 ,那么 其 逆 同 样 也 是 很 简单 的 . 实际 
上 , 考虑 任 一 有 限 区 间 [| < G1. 在 这 个 区 间 内 , (1.3) 中 的 收敛 是 一 致 的 , w 没有 零 


@ 在 15.2 节 的 末尾 (以 及 在 15.9 节 的 习题 9 中 ), 我 们 求 出 了 一 对 实 特征 函数 , 使 得 p3 二 g3. 这 
说 明 在 有 零点 的 情形 下 ,， 实 的 偶 特 征 函数 可 以 具有 2 个 实 根 , 且 这 2 个 实 很 也 是 特征 函数 . 
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点 蕴 售 对 于 所 有 充分 大 的 m |6| < 6, 有 pn(5) 关 0. 因此 , 我 们 可 以 取 对 数 , 并 断言 
nlnpn 一 lnw, 从 而 npn 一 0. 这 蕴含 对 于 每 个 固定 的 《, pn(C) 一 1， 且 收敛 在 每 
个 有 限 区 间 内 自然 是 一 致 的 . 因此 ， 和 在 (a) 中 一 样 , 我 们 断言 展开 式 (1.6) 成 立 ， 
因为 


1— pn(O) — 0, 
所 以 这 理 含 
men(5) = -nll ~ pn(O)](1 + 0(1)), (1.7) 

其 中 O(1) 表示 一 个 当 n 一 co 时 趋 于 0 的 量 . 由 假设 , 左边 趋 于 Inw(C), 从 而 显然 
有 nm[1 - pn] 一 一 Inw, 正如 所 断言 的 那样. 

为 使 这 个 论证 成 立 ,我们 必须 证 明 对 于 任 一 《4,w(C) 都 不 等 于 0， 为 此 ， 我 们 
可 以 分 别 把 w 和 pn 换 为 特征 函数 |wl? 和 |pnl?， 从 而 只 要 考虑 (1.3) 的 如 下 的 
特殊 情形 就 够 了 . 在 这 种 情形 中 ， 所 有 的 pn 都 是 实数 ， 且 w > 0 其次， 设 
14| < 4 是 使 w(6) > 0 的 区 间 . 在 这 个 区 间 内 ，-- jnwpn(5) 是 正 的 且 是 有 界 的 . 另 
一 方面 ,对 于 |4| < 41， 展开 式 (1.6) 成 立 ， 因 为 所 有 项 的 符号 都 相同 ， 所 以 对 于 
KI< comll - wn(G)] 是 有 界 的 . 但 是 根据 15.1 节 (1.7) 特征 函数 的 基本 不 等 式 有 


nll ~ pn(20)] < 4nll ~ pn(O)), 


从 而 nl1 一 wpn(0)] 对 所 有 的 [| < 2G: 是 有 界 的 . 由 此 推出 这 个 区 间 不 可 能 含有 ww 的 
零点 . 但 是 这 样 的 话 ， 最初 的 论证 适用 于 这 个 区 间 ， 并 导致 一 个 结论 , 对 于 所 有 的 
| < 4k1,w(6) > 0. 按 上 述 方法 继续 进行 ， 可 以 证 明 对 于 所 有 的 “,w(5) > 0， 
完成 了 证 明 . 

定理 1 有 许多 推论 . 用 上 > 0 乘 (1.4), 可 以 看 出 这 个 关系 式 等 价 于 


etmlen(6)-1] -ety( = wt(C). (1.8) 


左边 表示 一 个 复合 泊 松 型 分 布 的 特征 函数 ,因此 对 于 每 个 t > 0,ety() 是 一 个 特征 
函数 . 我 们 断言 , w = ev 一 定 是 无 穷 可 分 的 . 换 句 话说 , 作为 特征 函数 序列 {eo8} 的 
极限 出 现 的 每 个 特征 函数 w 都 是 无 穷 可 分 的 . 这 可 以 看 作 是 无 穷 可 分 性 定义 的 一 种 
扩展 , 其 中 把 恒等式 (1.1) 换 为 更 一 般 的 极限 关系 式 (1.3). 在 17.7 节 中 将 看 到 , 这 
个 结果 可 以 进一步 推广 到 更 一 般 的 三 角形 阵列 上 去 , 但 我 们 先 把 初步 的 结果 写成 
定理 2 ”为 使 特征 函数 w 是 无 穷 可 分 的 ， 当 且 仅 当 存 在 一 个 特征 函数 序列 {pn}， 
使 得 pn 一 

在 这 种 情形 下 , 对 于 每 个 t> 0,wt 是 一 个 特征 汪 数 , 并且 对 于 所 有 的 4,w(6) 关 
0 . . 
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系 “无穷 可 分 特征 函数 序列 {wn} 的 连续 极限 仍 是 无 穷 可 分 的 . 

证 “由 假设 ,pn = wj ” 仍 是 特征 函数 ， 从 而 关系 式 wn 一 w 可 以 改写 成 pn 一 几 

的 形式 . > 
每 个 复合 泊 松 分 布 是 无 穷 可 分 的 . 定理 1 告诉 我 们 , 每 个 无 穷 可 分 分 布 可 以 表 

示 为 一 列 复 合 泊 松 分 布 的 极限 [ 见 满足 t= 1 的 (1.8)]. 这 样 我 们 得 到 了 无 穷 可 分 性 

的 一 个 新 的 特征 . 

定理 3 无 穷 可 分 分 布 类 和 复合 泊 松 分 布 的 极限 分 布 类 重合 . 


在 独立 增 量 过 程 中 的 应 用 ”正如 6.3 节 中 所 说 明 的 那样 ,这 样 的 过 程 可 以 用 具有 如 下 性 质 
的 随机 变量 族 {X(t)} 来 描述 : 对 于 任 一 分 划 to < < … < tn, 诸 增 量 关 (t) 一 (tk-1) 表 
示 n 个 相互 独立 的 变量 . 增 晤 是 平稳 的 , 如 果 XX(s+t) 一 六 (s) 的 分 布 只 依赖 于 区 闻 的 长 度 t 
而 不 依赖 于 它 在 时 间 轴 上 的 位 置 . 在 这 种 情形 下 , XX(s+t) 一 X(t) 是 nn 个 与 X(st+t/n) 一 X(s) 
有 相同 分 布 的 独立 变量 之 和 ， 从 而 多 (s 十 t) 一 义 (s) 的 分 布 是 无 穷 可 分 的 . 反之 , 任 一 族 具有 
形 如 ety 的 特征 函数 的 无 穷 可 分 分 布 可 以 规定 一 个 平稳 独立 增 量 过 程 . 17.7 节 中 关于 三 角 
形 阵 列 的 结果 可 以 把 这 个 结果 推广 到 具有 非 平稳 独立 增 量 的 过 程 . 于 是 增 量 X(t 十 s) 一 X(s) 
是 诸 增 最 六 (tk+1) - X(tk) 之 和 ,这 些 增 量 是 相互 独立 的 随机 变量 ， 只 要 在 当 h 一 0 时 增 
基 X(t+hh) 一 X(t) 依 概率 趋 于 零 的 意义 上 过 程 是 连续 的 , 就 可 应 用 17.7 节 的 定理 . 对 于 这 
样 的 过 程 , 增 量 久 (t 十 8) 一 羡 (t) 的 分 布 是 无 穷 可 分 的 . (这 种 类 型 的 不 连续 过 程 是 存在 的 , 但 
是 不 连续 点 并 不 足 道 , 并 且 在 某 种 意义 上 是 可 除去 的 . 见 9.5 节 和 9.9 节 中 的 讨论 . ) 

复合 泊 松 过 程 有 特别 简单 的 概率 解释 ( 见 6.3 节 和 9.5 节 ), 每 个 无 穷 可 分 分 布 可 作为 
复合 泊 松 分 布 的 极限 出 现 这 个 事实 ,可 以 帮助 我 们 理解 更 一 般 的 独立 增 量 过 程 的 性 质 . 
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我 们 已 经 看 到 ,为 了 求 出 无 穷 可 分 特征 函数 w = ev 的 最 一 般 形式 ， 只 需 确定 
复合 泊 松 型 特征 函数 exp cn(Cn 一 1) 的 序列 的 可 能 的 极限 的 一 般 形 式 就 够 了 . 为 便 
于 各 种 应 用 , 最 好 通过 人 允许 任意 的 定 中 心 来 更 一 般 地 叙述 这 个 问题 , 从 而 我 们 要 寻 
求 形 如 wn = et" 的 特征 函数 的 序列 的 可 能 的 极限 , 其 中 为 了 简单 起 见 , 我 们 令 

Wn(O) = cnlpn(b) — 1— iBnd]. (2.1) 
wn 是 无 穷 可 分 的 , 因此 它们 的 连续 极限 也 是 无 穷 可 分 的 . 
我 们 的 问题 是 寻找 这 样 的 条 件 , 使 得 在 这 些 条 件 下 存在 一 个 连续 的 极限 
(6) = lim yn(O)- (2.2) 


言 而 喻 , pn 是 一 概率 分 布 Fn 的 特征 函数 ,cn 是 正常 数 , 中心 常数 pn 是 实数 . 
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对 于 期 望 存在 的 分 布 ， 自 然 要 这 样 定 中 心 ,使 得 期 望 为 0, 如 有 可 能 , 我 们 将 
照 此 选择 Bn. 但 是 我 们 需要 一 个 具有 类 似 性 质 的 普遍 可 用 的 中 心 常 数 . 结果 是 , 这 
种 最 简单 的 中 心 常数 可 通过 下 述 要 求 得 到 , 对 于 ¢ = 1, pn 的 值 是 实数 . 如 果 un 和 
vn 表示 pn 的 实 部 和 庶 部 , 那么 我 们 的 条 件 要 求 


Bn = wn(l) = / 六 sinzFn {dz}. (2.3) 
这 说 明 我 们 的 定 中 心 方法 总 是 可 行 的 . 对 于 这 种 定 中 心 方法 ， 


Yn(C) = cn 广 [et= — 1— icsinz]F,{dz}. (2.4) 


被 积 函 数 在 原点 附近 与 -3 有 相同 的 性 质 , 这 和 我 们 所 熟悉 的 定 中 心 定 在 期 户 
为 0 的 情形 一 样 . 中 心 常数 (2.3) 的 用 处 多 半 是 由 于 如 下 的 . 

引 理 1 设 {cn} 和 {yn} 是 给 定 的 . 如 果 存 在 中 心 常 数 Bn, 使 Wn 趋 于 一 个 连续 的 
极限 由 ,那么 (2.3) 可 达到 同样 的 目的 . 

证 用 带 有 任意 Bn 的 (2.1) 来 定义 加 ， 假 设 如 一 少 如 果 ? 表示 %(1) 的 虑 部， 
那么 对 于 5 = 1, 我 们 断言 


cn(vn(1) - Pn) 一 由 (2.5) 
用 认 乘 以 上 式 并 从 如 一 少 中 减 去 刚才 所 得 到 的 关系 式 ， 我 们 看 到 
cn[en(6) —1— ivn(1)¢] — w(C) 一 这， (2.6) 


这 就 证 明了 断言 . 

我 们 首先 在 一 个 特殊 情形 下 讨论 我 们 的 收敛 性 问题 . 在 这 种 情形 下 ， 名 特别 和 
单 . 假设 函数 y, 和 少 都 是 二 次 可 微 的 (这 就 是 说 , 相应 的 分 布 的 方差 存在 , 见 15.4 
节 ). 假设 不 仅 有 wn 一 少 ,而且 还 有 忧 一 WwW. 由 (2.1) 看 来 , 这 就 是 说 


+o0 
人 sea 一 -WO (2.7) 
根据 假设 , cnz?F,{dz} 确定 一 个 有 限 测度 , 我 们 用 ju 表示 它 的 总 质量 . 对 于 5 = 0， 
我 们 从 (2.7) 可 看 出 ps 一 -和 (0). 用 um 除 (2.7)， 在 左边 我 们 得 到 一 个 正常 概率 
分 布 的 特征 函数 ， 当 n 一 oo 时 它 趋 于 w(C)/w"(0). 由 此 推出 wr(C)/w"(0) 是 一 个 
概率 分 布 的 特征 函数 ,从 而 


有 
-GO= /emtar), . (2.8) 
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其 中 M 是 一 个 有 限 测度 . 由 此 我 们 可 以 通过 票 积分 得 到 人 注意 到 w(0) = 0, 以 及 
对 于 我 们 的 定 中 心 条 件 , %(1) 必须 是 实数 ,我们 就 可 得 到 


+eo eitz _1_icai 
“oO=/ suas}. (2.9) 


这 个 积分 是 有 意义 的 ,因为 被 积 函 数 是 在 原点 处 取 值 -3 的 有 界 连续 函数 . 

在 我 们 的 可 微 性 条 件 下 , 极限 必然 具有 (2.9) 的 形式 . 其 次 我 们 证 明 , 对 于 
一 个 任意 选择 的 有 限 测度 M, 积分 (2.9) 定义 了 一 个 无 穷 可 分 特征 函数 ev. 但 是 ， 
我 们 可 以 再 深入 一 步 . 为 使 积分 有 意义 , 不 必要 求 测度 M 是 有 限 的 . 只 要 M 对 有 
限 区 间 赋 予 有 限 质量 , 并 且 M{-z,z} 增加 的 充分 缓慢 , 使 得 对 于 所 有 的 z > 0, 积 
分 


MO= wma ms) = {yma} (2.10) 


收敛 就 行 了 .( 为 了 确定 起 见 ， 我 们 取 积分 区 间 为 闭 的 . ) 由 满足 0 < p < 1 的 密度 
lejPds 确定 的 测度 是 典型 的 例子 . 我 们 证 明 , 如 果 测度 M 具有 这 些 性 质 , 那么 (2.9) 
定义 了 一 个 无 穷 可 分 特征 函数 ， 并 且 所 有 这 样 的 特征 函数 都 可 以 用 这 种 方法 得 到 . 
因为 对 我 们 的 测度 引入 一 个 专门 术语 将 是 很 方便 的 . 

定义 1 一 个 测度 M 称 为 标准 的 ， 如 果 它 对 有 限 区 间 赋 予 有 限 质 量 ， 并且 积分 
(2.10) 对 于 某 一 (因而 所 有 的 )z > 0 收敛 . 

引 理 2 如果 M 是 一 个 标准 测度 , 且 少 由 (2.9) 确定 ， 那 么 ey 是 一 个 无 穷 可 分 特 
征 画 数 ， 

证 “我 们 考虑 2 种 重要 的 特殊 情形 

(a) 假设 M 集中 于 原点 上 ， 且 对 原点 赋予 质量 m > 0. 于 是 WC) = -m6?/2， 
从 而 ev 是 一 方差 为 m-! 的 正 态 特征 丙 数 . 

(b) 假设 M 集中 于 |z| > 9 上 , 其 中 必 > 0. 在 这 种 情形 下 , (2.9) 可 以 改写 成 更 
简单 的 形式 . 实际 上 , z-?M{dz} 现在 确定 一 个 总 质量 为 == M+(m) + M-(m) 的 
有 限 测度 . 因此 ,2-?M{dz}/ = FP{dz} 确定 一 个 特征 函数 为 p 的 概率 测度 ,显然 
V(G) = plp(C) 一 1 一 ibk], 其 中 5 是 实 常数 . 于 是 在 这 种 情形 下 ev 是 复合 泊 松 型 特 
征 函 数 ， 从 而 是 无 穷 可 分 的 . 

(0) 在 一 般 情形 下 , 设 m > 0 是 M 赋 于 原点 的 质量 , 令 

eicz 一 1 一 这 sinz 
WO- 人， 一 saraoh G.) 
于 是 
VO) = -6 + lm bn(O). (2.12) 
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我 们 已 经 知道 , es"(9 是 一 个 无 穷 可 分 分 布 U, 的 特征 函数 . 如 果 m > 0， 那 么 把 
一 m62/2 加 到 ww(6) 上 去 相当 于 取 U5 与 一 个 正 态 分 布 的 卷 积 . 于 是 (2.12) 把 ev 表 
示 为 一 个 无 穷 可 分 特征 函数 序列 的 极限 ,因此 ev 是 无 穷 可 分 的 ,正如 所 断言 的 那 
样 . p 
其 次 我 们 证 明 , 在 不 同 的 标准 测度 产生 不 同 的 积分 的 意义 上 , 表达 式 (2.9) 是 
唯一 的 . 
引 理 3 ” 少 的 表达 式 (2.9) 是 唯一 的 . 
证 在 测度 M 有 限 的 特殊 情形 下 ， 显 然 二 阶 导数 Ww 存在 , 且 -ww'(6) 和 exs 关 
于 M 的 期 望 重合 . 特征 函数 的 唯一 性 定理 保证 M 由 WW, 从 而 由 少 唯一 地 确定 . 
这 个 论证 可 适用 于 无 界 的 标准 测度 ,但 是 必须 把 二 阶 导数 换 为 一 个 具有 类 似 
性 质 且 适 用 于 任意 连续 函数 的 运算 . 这 样 的 运算 可 以 用 各 种 各 样 的 方法 选择 (见习 
题 1~ 习题 3). 我 们 选择 一 个 这 样 的 运算 , 它 把 少 变换 成 下 式 确定 的 函数 yj 六 ， 


妇 Le 
六 (0) =W0) 一 未 ve + s)ds, (2.13) 
其 中 心 > 0 是 任意 固定 的 . 对 于 (2.9) 所 确定 的 函数 少 , 我 们 得 到 
or) = 矿 sceKGMtda (214) 
其 中 为 了 简单 起 见 , 我 们 令 
K(z)= 7? E 一 加 名] < (2.15) 


这 是 一 个 在 原点 取 值 如 /6 的 严格 正 的 连续 函数 , 并 且 当 x 一 士 co 时 我 人 有 K(z) ~ 
2z-?. 因此 , 由 M*{dz} = K(z)M{dz} 所 确定 的 测度 是 有 限 的 , (2.14) 说 明 yx 是 
它 的 传 里 叶 变换 . 根据 特征 函数 的 唯一 性 定理 , w* 唯一 地 确定 测度 M*. 但 是 这 
样 M{dz} = K-*(z)M*{dz} 是 唯一 确定 的 ,因此 当 风 已 知 时 , 我 们 可 以 计算 出 
相应 的 标准 测度 (参阅 习题 3). > 

我 们 的 下 一 个 目标 是 证 明 , 引 理 2 描述 了 所 有 无 穷 可 分 特征 函数 的 全 体 , 为 此 
我 们 必须 首先 解决 本 节 开始 时 所 述 的 收敛 性 问题 ， 我 们 现在 把 它 写成 下 面 稍微 更 
一 般 的 形式 : 设 {Mn} 是 一 列 标准 测度 , 并 且 


了 


+oo uikz_]_irai 
GO= 人 Sl ey ay, (2.16) 


其 中 bn 是 实数 . 我 们 要 找 使 Wo 一 %( 其 中 多 是 一 个 连续 函数 ) 的 充 要 条 件 . 注意 
(2.1) 或 (2.4) 所 确定 的 函数 加 是 (2.16) 的 一 个 特殊 情形 , 其 中 


Mn{dz} = cnz2P{dz}. (2.17) 
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假设 一, 且 少 是 连续 的 . 于 是 (2.13) 所 定义 的 变换 满足 yz 一 4*， 即 
ys essK (zo) Ma{dz} — (0), (218) 
其 中 K 是 由 (2.15) 所 定义 的 严格 正 的 连续 函数 . 左边 是 一 个 总 质量 为 
m= Knute (2.19) 


的 有 限 测度 的 信里 叶 变 换 . 显然 un v*(0). 容易 看 出 ,im 一 0 蕴含 对 于 所 有 的 
Cp(C) =0, 从 而 我 们 可 以 假定 yx(0) = /> 0. 于 是 由 


Mgfdaz} = TK(o) Made} (2.20) 


所 定义 的 测度 Mx 是 概率 测度 ，(2.18) 说 明 它们 的 特征 函数 趋 于 连续 函数 y* (6)/ 
wx(0). 由 此 推出 
M* —» M*, (2.21) 


其 中 M* 是 特征 本 数 为 yk(CJ/4x(0) 的 概率 测度 . 但 是 ,yn 可 以 写成 如 下 形式 ， 
m0 =m Mtr} ti (2 


被 积 函数 是 z 的 一 个 有 界 连续 函数 ， 从 而 (2.21) 蕴含 积分 收敛 , 由 此 推出 bn 一 b， 
且 我 们 的 极限 多 具有 形式 


vO=4 kM ti 2) 
因为 M* 是 一 个 概率 测度 ， 所 以 显然 由 
Mi{dz} = pK-1(z)M* {dz} (2.24) 
定义 的 测度 M 是 标准 的 , 并且 


“0= [mtr) + 二 (2.25) 
这 说 明 除了 不 相干 的 定 中 心 项 bc 外 ,我 们 所 有 的 极限 都 具有 引 理 2 所 述 的 形式 . 
正如 已 经 所 述 的 那样 (2.1) 所 定义 的 函数 yn 是 (2.16) 的 一 个 特殊 情形 ,从 而 我 们 
解决 了 本 节 开始 时 所 述 的 收敛 性 问题 . 我 们 把 这 个 结果 所 述 为 
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定理 1 无 穷 可 分 特征 画 数 类 和 形 如 e 的 函数 类 重合 ,其 中 少 是 借助 一 个 标准 
测度 M 和 一 个 实数 b 由 (2.25) 确定 的 . 

换 句 话说 , 除了 任意 的 中 心 常数 外 , 在 标准 测度 和 无 穷 可 分 分 布 之 间 有 一 个 一 
一 对 应 . 

在 上 节 中 我 们 强调 过 : 条 件 MHz 一 M* 和 bn 一 5 是 关系 式 加 一 少 成 立 的 必 
要 条 件 . 实际 上 我 们 也 已 证 明了 这 些 条 件 的 充分 性 , 因为 yn 可 以 写成 (2.22) 的 形 
式 , 因此 如 显然 趋 于 由 (2.23) 所 确定 的 极限 . 于 是 我 们 得 到 了 一 个 有 用 的 极限 定 
理 , 但 是 最 好 用 标准 测度 Mn 和 M 来 表示 条 件 Mr 一 M*. (2.22) 确定 了 Mn 和 
M 六 之 间 的 关系 . 在 任 一 有 限 区 间 上 K 是 取 0 与 co 以 外 的 有 界 值 , 因此 对 于 每 个 
有 限 的 7,， 关系 式 MHz{ 丰 一 M*{ 了 } 和 Mn{T] 一 M{T] 是 相互 等 价 的 . 当 z 一 oo 
时 , K 的 性 质 和 z-? 的 性 质 几乎 相同 ， 从 而 Mr*{ 到 55} ~ M+(z), 其 中 Mi+ 表示 
在 标准 测度 的 定义 式 (2.10) 中 出 现 的 积分 . 于 是 正常 收敛 Mzx 一 M* 完全 等 价 于 
条 件 : 对 于 M 的 所 有 连续 区 间 ， 


Mn{ 丰 一 M{T}, (2.26) 
且 对 于 所 有 的 连续 点 z > 0， 
Mt (z) = M+(z), Ma(z) 一 MT(z). (2.27) 
在 形 如 Mn{dz} = cnz?Fn{dz}( 其 中 F 是 概率 分 布 ) 的 标准 测度 的 特殊 情形 下 , 这 
些 关 系 式 呈 形式 
cn / TFn {dr} 一 MI{I} (2.28) 
I 
和 
cn[l — Fn(z)] 一 M+(z), cnFn(—7) 一 M-(-z). (2.29) 
如 果 工 = a,5 是 一 个 不 包含 原点 的 有 限 连 续 区 间 , 那么 (2.28) 显然 列 含 cnFn{I} 一 
M+(a) - M+(b), 从 而 可 以 把 (2.29) 看 作 (2.28) 向 半 无 穷 区 间 的 推广 . 一 个 等 价 的 
条 件 是 : 没有 质量 流 到 无 穷 远 处 , 这 就 是 说 , 对 于 每 个 e > 0, 有 相应 的 一 个 7, 使 
得 至 少 对 于 所 有 充分 大 的 n， 
cnll — F(T) + Fn(-7)] <e. (2.30) 


在 有 条 件 (2.28) 的 情形 下 , 条件 (2.29) 和 (2.30) 相互 等 价 . [注意 , (2.30) 的 左边 是 
7 的 减 函 数 . ] 标准 测度 Mn{dz} = cnz?Fn{dz} 的 序列 将 如 此 经 常 地 出 现 ,以 至 于 
为 了 便于 引用 , 最 好 引入 一 个 方便 的 术语 . 

定义 2 称 标准 测度 列 {Mn} 正常 地 收敛 于 标准 测度 M, 如 果 它 们 满足 条 件 (2.26) 
和 (2.27). 当 且 仅 当 在 这 种 情形 下 , 我 们 记 Mn 一 M. 
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利用 这 个 术语 , 我 们 可 以 把 我 们 关于 收敛 wn 一 水 的 结论 重新 叙述 如 下 . 
定理 2 设 Mn 是 一 个 标准 测度 ,Wr 由 (2.16) 所 确定 .如 趋 于 一 个 连续 函数 幼 ， 
当 且 仅 当 存 在 一 个 标准 测度 M, 使 得 Mn 一 M,bn 一 b. 在 这 种 情形 下 , 则 由 (2.25) 
给 出 . 

以 后 我 们 只 把 这 个 定理 应 用 于 特殊 情形 


加 (6) = cn[pn(C) — 1 ~ ibnd], (2.31) 
其 中 pn 是 一 个 概率 分 布 Fn 的 特征 函数 . 于 是 我 们 的 条 件 呈 如 下 形式 


cnz2Fhfdz} 一 M{dz},cn(Bn — bn) —b (2.32) 
其 中 我 们 再 次 令 
成 二 gh sinz. {dz}. (2.33) 


由 17.1 节 定 理 1, 我 们 的 条 件 不 仅 适用 于 复合 泊 松 分 布 序列 ， 而 且 还 适用 于 形 如 
{98] 的 更 一 般 的 序列 ， 


关于 其 他 标准 表达 式 的 注 测度 M 不 是 文献 中 过 到 的 那 种 测度 . P. 列 维 在 其 开创 性 著作 中 
利用 了 在 原点 外 由 A{dz} = z-?M{fdz} 定义 的 测度 4, 并 且 此 测度 是 nFn{dz} 的 极限 . 它 
在 区 间 |z| > 5 > 0 上 是 有 限 的 , 但 是 在 原点 附近 是 无 界 的 . 它 不 考虑 M 在 原点 上 的 原子 
(如 果 有 的 话 ). 利用 这 个 测度 ，(2.9) 旦 形式 


yO) = jo 十 这 十 ja [ex — 1— icsinz]Af{dz}. (2.34) 
一 0Jlzl>5 
这 是 P. Lévy 的 最 初 的 标准 表达 式 (除了 中 心 函数 不 同 以 外 )， 它 的 主要 缺点 是 ,为 了 充分 
陈述 测度 4 的 所 要 求 的 性 质 , 需要 费 很 多 口舌 . 
辛 钦 引 入 了 由 K{dz} = (1+z?)-!M{dz} 定义 的 有 界 测度 . 这 个 有 界 测度 可 以 任意 选 
择 ， 辛 钦 的 标准 表达 式 为 


z(6) = 这 十 [ 3 [ee -1- 了 | 1 +e K{dz}. (2.35) 


最 容易 描述 这 个 表达 式 , 因为 它 避 免 了 无 界 测度 . 这 个 优点 被 下 述 事实 所 抵消 , 测度 天 的 
人 为 性 不 必要 地 使 许多 论证 更 加 复杂 . 稳定 分 布 和 17.3 节 例 (f) 说 明了 这 种 困难 . 


特征 函数 的 导数 


设 下 是 一 概率 分 布 ,其 特征 函数 为 p. 在 15.4 节 中 曾 证 明 , 如 果 F 有 限期 望 4, 那么 
% 具有 导数 p', 并 且 9 (0) = 让. 其 逆 不 真 . 9 的 可 微 性 与 具有 共同 分 布 F 的 独立 随机 变量 
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序列 {X} 的 大 数 定律 有 密切 关系 , 因此 许多 人 研究 加 在 F 上 的 、 能 保证 w' 存在 的 条 件 . 
皮特 最 (E. J. G. Pitman) 1956 年 根据 济 格 蒙 德 (A. Zygmund)(1947) 给 出 的 部 分 答案 解决 
了 这 个 问题 ( 济 格 蒙 德 还 对 ”附加 了 光滑 度 条 件 )， 由 于 直接 解决 这 个 问题 要 过 到 非常 大 的 
困难 , 所 以 若 知 它 的 解答 可 作为 上 一 定理 的 简单 推论 得 到 将 是 有 趣 的 . 
定理 3 ”下列 3 个 条 件 是 相互 等 价 的 . 

人 w(0) = ip. 

人 (i 当 上 + 一 oo 时 ， 


tl — F(t) + F(-t)] — 0, 站 “Ptdzj = hi. (2.36) 


(过 ) 平均 值 (Xi 十 … 十 Xn)/n 依 概率 趋 于 j. 
证 因为 v 的 实 部 是 偶 函 数 , 所 以 导数 w' (0) 一 定 是 纯 虚 数 . 为 了 得 到 我 们 的 极限 定理 与 
关系 式 py'(0) = iy 之 间 的 关系 , 最 好 把 后 者 写成 形式 


tlp(¢/) -1 > Ip, +00. (2.37) 
如 果 t 取 遍 序列 {cn}， 那 么 上 式 成 为 (2.31) 的 一 个 特殊 情形 ， 其 中 pn(6) = yp(C/en)， 

Fn(z) = F(cnz). 于 是 定理 2 断言 ,为 使 (2.37) 成 立 , 当 且 仅 当 

Es 
tz? FP{tdz} 一 0,t / sinzF {tdz} 一 几 (2.38) 
(a) 假设 (2.36) 成 立 , 利用 分 部 积分 可 得 , 对 于 任意 的 a > 0， 
t / "22F{tdz} < 4 “itz[1 — F(tz) + F(tz)ldz. (2.39) 
hm | 


当 t 一 oo 时 被 积 函数 趋 于 0, 从 而 当 t 一 co 时 积分 趋 于 0. 因为 ltsinz/t 一 z| < cz?, 所 以 
由 此 容易 推出 (2.38) 成 立 , 这 就 得 到 了 (2.37). 反之 ，(2.38) 显然 葡 含 (2.37). 因此 ,条件 
(i) 和 (i 是 等 价 的 . 

(b) 根据 17.1 节 定 理 1 我 们 有, 为 使 P"(C/n) 一 ex 当 且 仅 当 


nlp(C/n) 一 一 in. (2.40) 


换 句 话说 , 为 使 大 数 定律 成 立 , 当 且 仅 当 上 取 遍 正 整 数 序列 时 ，(2.37) 成 立 . 因为 特征 函 赦 
的 收敛 在 有 限 区 间 上 自然 是 一 致 的 , 所 以 很 明显 (2.40) 蕴含 (2.37), 因此 条 件 (i) 和 (ii) 是 
等 价 的 . 


也 可 以 利用 7.7 节 定理 1 中 的 不 同方 法 来 证 明 (2.36) 是 大 数 定律 (ii) 的 充 要 条 件 ，。> 
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17.3 ” 例 与 特殊 性 质 


我 们 先 列举 一 些 特殊 分 布 ,然后 转向 秆 的 存在 性 和 正 性 等 性 质 . 把 它们 作为 例 
子 编 入 ， 部 分 地 是 为 了 使 说 明 清晰 ,部 分 地 是 为 了 强调 各 个 项 目 之 间 是 没有 联系 
的 . 本 节 的 所 有 内 容 以 后 都 用 不 到 , 进一步 的 例子 可 在 习题 6、 习题 7 和 习题 19 中 
搜 到 . 
例 (a) 正太 分 布 .如 果 M 集中 于 原点 上 ,并 且 对 原点 赋 于 质量 o?， 那么 (2.25) 
导致 (C) = -3026?, 并 且 ev 是 正 态 的 ， 它 的 期 望 为 0, 方差 为 2. 

例 (b)。 泊 松 分 市. 期望 为 a 的 标准 泊 松 分 布 的 特征 函数 为 w = es, 其 中 W(C) = 
atek -- 1) 我 们 改变 位 置 参数 ， 以 便 得 到 集中 在 形 如 -二 nh 的 点 上 的 一 个 分 布 
这 就 把 指数 变 成 (<) = atexe - 1) -- ic， 此 式 是 (2.25) 的 一 个 特殊 情形 ,其 中 M 
集中 于 点 上 . 因此 ,测度 M 集中 于 一 点 上 这 一 性 质 是 具有 任意 尺度 参数 的 正 态 
分 布 和 泊 松 分 布 的 特征 . 有 限 多 个 这 样 的 分 布 的 郑 积 对 应 于 具有 有 限 多 个 原子 的 标 
准 测度 最 一 般 的 测度 M 可 以 作为 这 样 的 测度 序列 的 极限 而 获得 ， 因 此 所 有 无穷 
可 分 分 布 是 有 限 多 个 正 态 分 布 和 激 松 分 布 的 卷 积 的 极限 . 

例 (c) 随机 化 了 的 随机 游 动 . 在 2.7 节 (7.7) 中 我 们 曾 遇 到 过 一 族 对 7 = 0, 土 1, 土 2,… 


赋予 概率 
“(0 = (2) ein2vmad (3.1) 


的 算术 分 布 . 此 处 参数 p,q,t 是 正 的 , p+q = 1,1r 是 2.7 节 (7.1) 中 定义 的 贝 塞 尔 
函数 . {ar} 满足 查 普 曼 - 科 尔 莫 戈 罗 夫 方程 这 一 事实 表明 它 是 无 穷 可 分 的 . 它 的 特 
征 函数 w = ev 很 容易 算出 , 因为 它 与 施 勒 米 希 展开 式 2.7 节 (7.8) 的 不 同 之 处 只 是 
变量 代 换 4 = Vp/ge-*. 结果 


VO) = -t+ t(pe’ + qe) (3.2) 


表明 , {ar(t)} 是 两 个 期 望 为 pt 和 qt 的 独立 泊 松 变量 之 差 的 分 布 . 标准 测度 集中 于 
点 二 1 二 


例 (d) 械 分 布 . 密度 为 
gt(z) =e zl/T(t), rz>0 


的 分 布 的 特征 函数 为 ve(¢) = (1 - i) 一 ， 此 函数 显然 是 无 穷 可 分 的 . 为 了 把 它 写 成 
标准 型 , 应 注意 


Qnm(O) = (1 i)-! = dr G.3) 
0 
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利用 积分 可 得 


Inu(O) =t [ > 2 lo-sqz. (3.4) 


因此 , 标准 测度 M 由 密度 tze“(z > 0) 确定 . 此 处 不 需要 定 中 心 项 ， 因 为 没有 它 
积分 也 收敛 . 

” 例 (e) 双 曲 余 强 密 度 .我 们 在 15.2 节 已 看 到 , 密度 f(z) = 1/rcoshz 的 特征 函数 为 
w(6) = 1/ cosh(nC/2). 为 了 证 明 它 是 无 穷 可 分 的 , 我 们 注意 到 (inw)”= 一 (r2/4)w2. 
w2 是 在 2.9 节 习题 6 中 算出 的 密度 f2* 的 特征 函数 . 于 是 


oe 
所 inw(c) = -/ 次 er = dz. (3.5) 
因为 (inw)' 在 原点 处 等 于 0, 所 以 我 们 得 到 
+o0 iz _ 1 
moO=/ (3.6) 


因此 , 标准 测度 有 密度 z/(es 一 e-”). 由 对 称 性 , 项 Cz 的 贡献 等 于 0; 因为 没有 它 
积分 也 收敛 , 所 以 可 以 从 分 子 中 把 这 一 项 去 掉 . 
例 (f) P. 列 维 的 例子 . 函数 


十 ooc 
WO) =2 2 2 leos2% —1] (3.7) 
大 一 一 co 

具有 (2.9) 的 形式 , 其 中 M 是 对 称 的 , 并 对 于 点 土 2* 赋 对 质量 2*(k = 0, 士 1, 士 2… 
(这 个 级 数 收敛 , 因为 当 大 一 -oo 时 1 一 cos2-*C ~ 22 162. ) 特征 函数 w=ev 具 
有 如 下 奇特 的 性 质 : w2(4) = w(26)， 从 而 wz (6) = (2*C). 由 (在 6.1 节 中 引进 的 
意义 上 的 ) 稳定 性 , 对 于 所 有 的 n, 我 们 应 有 w"(C) = wlanC), 但 是 这 个 要 求 只 有 当 
n = 2,4,8.… 时 才 被 满足 . 利用 17.9 节 的 术语 , 这 个 属于 它 自己 的 部 分 吸引 域 ， 
但 是 它 没有 吸引 域 .( 见 习题 10.) 
例 (8) ” 单 侧 稳定 密度 . 我 们 来 计算 与 满足 


MI{5,z}=Cr°, 0<a<2, C>0 (3.8) 


的 集中 在 而 6 上 的 标准 测度 相对 应 的 特征 函数 . 本 例 很 重要 ， 因 为 我 们 可 由 它 推 
导 稳定 特征 函数 的 一 般 形式 . 
人 如 果 0 < a < 1, 那么 我 们 考虑 特征 函数 wa = e**, 其 中 


icz 一 
如 (= CC-a 广 Te (3.9) 
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此 式 与 标准 型 (2.9) 的 不 同 之 处 在 于 省 略 了 定 中 心 项 , 此 项 可 省 去 , 因为 没有 它 积 
分 也 收敛 . 为 了 计算 这 个 积分 , 我 们 假设 4 > 0, 并 把 它 看 作 是 


oo e-O-ioz _1 
Ee ei iC)zy 一 at 
/ de = 10- iC) 广 dz 


志 -2r( 一 oa(A 一 i0)=， (3.10) 
当 入 一 0+ 时 的 极限 (关于 工 密度 的 特征 函数 见 15.2 节 ). 现在 

QH -il)® = +6)°/2e0, 
其 中 9 是 和 -i 的 辐 角 , 即 tang = 一 C/ 和 . 显然 , 当 入 一 0+ 时, 9 一 一 x/2, 从 而 
(和 一 6)* 一 69e me/2. 我 们 把 最 后 这 个 结果 写成 形式 


加 = 人 CT 全 er 


和 ，¢>0. (3.11) 


对 于 5 > 0,ya(5) 是 wa(-6) 的 共 斩 . 
(人 当 1<a<2 时 , 我 们 令 


eicz 一 1 一 
加 (=C 三 一 zo (3.12) 


此 式 与 标准 型 (2.9) 的 不 同 之 处 在 于 这 里 把 中 心 定 在 期 望 为 0. 通过 分 部 积分 可 化 
简 分 母 中 的 指数 , 并 能 够 使 我 们 利用 上 述 结果 . 通常 的 计算 表明 ,wa 仍 由 (3.11) 给 
出 . ( 实 部 仍 是 负 的 , 因为 现在 cosna/2 < 0. ) 

(说 ) 当 a = 1 时 , 我 们 利用 标准 形式 


He 
(6)=C 大 a (3.13) 


从 15.2 节 中 我 们 知道 (1 - cosz)/(xz?) 是 一 个 概率 密度 ， 从 而 加 (5) 的 实 部 等 于 
一 5 关于 虚 部 我 们 得 到 


广 ns lim my | 广 并 gz - oe S|. (3.14) 
当 《>0 时代 换 bz =y 把 第 1 个 积分 化 成 第 2 个 积分 的 形式 , 整个 式 子 化 为 
EC 到 三 节 he im/ 和 =—CIncC, (3.15) 


于 是 最 后 有 | 
0)=C (-# 一 im 了 (3.16) 
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当然 , 回 (-5) 是 办 (6) 的 共 轿 
当 a 关 1 时 特征 函数 w 一 eye 具有 如 下 性 质 : wm(C) = w(n/*6). 这 就 是 说 , 按 
照 6.1 节 的 定义 , w 是 严格 稳定 的 : 特征 函数 为 w 的 独立 变量 Xi …,Xn 之 和 与 
ma/“Xi 有 相同 的 分 布 . 当 a = 1 时 我 们 有 w"(6) = w(nC)e~X<m*， 从 而 这 个 和 的 分 
布 与 ni/*X1 的 分 布 的 不 同 之 处 仅 在 于 它 的 中 心 常数 . 因此 , 1 是 广义 稳定 的 . 
[关于 稳定 分 布 的 各 种 各 样 的 性 质 和 例子 , 见 6.1 节 ~ 6.2 节 . 其 他 的 性 质 将 在 
17.5 节 中 导出 . 在 17.4 节 中 我 们 将 看 到 ， 当 a < 1 时 分 布 集中 于 正 半 轴 上 . 这 对 
a > 1 是 不 正确 的 . ] 
例 (h) 一 般 的 稳定 分 布 . 对 于 上 例 的 每 个 ye,， 有 一 个 类 似 的 特征 函数 与 之 对 应 ， 
它 是 由 具有 相同 密度 的 标准 测度 导出 的 , 但 它 集中 于 负 半 轴 上 . 为 得 到 这 些 特征 函 
数 ,只 要 把 我 们 的 公式 中 的 i 变 成 一 就行 了 . 如 果 取 两 个 极端 情形 的 线性 组 合 , 即 
利用 这 样 一 个 标准 测度 M, 使 得 对 z > 0， 


MI{D,z} = Cpr’-°, MI{-7,0} = Caz2-"， (3.17) 


那么 我 们 可 以 推导 更 一 般 的 稳定 特征 函数 . 此 处 p > 0,g > 0,p+q = 1. 由 此 显然 
可 见 ， 相应 的 特征 函数 w=e* 当 0<a<1 或 1<a<2 时 由 


V(O = Kas 9 
确定 ， 当 a 二 1 时 由 
w=-Kl-c [jtio -oogld (3.19) 


cos TF +ilp — q) )sn 至 ] (3.18) 


确定 . 此 处 当 5 > 0 时 用 上 面 的 符号, 当 《 < 0 时 用 下 面 的 符号. 注意 对 = 2 我 
- 们 得 到 yy(C) 二 -了 (p 上 62， 即 正 志 分 市. 它 对 应 于 集中 在 原点 上 的 测度 M. 
在 17.5 节 中 将 指出 (忽略 任意 的 中 心 常数 )， 这 些 公式 给 出 了 及 一 般 的 检定 特 
企 本 雪 特别 ,任何 对 称 的 和 定 分 布 都 具有 形式 e-*ici” 的 特征 函数 ,其 中 a> 0 
17.4 特殊 性 质 
在 本 节 中 w = et 表示 一 个 无 穷 可 分 特征 丙 数 ,其 中 少 是 以 标准 型 
“0= /ms} + (CD 
给 出 的 ,这 里 M 是 一 个 标准 测度 , 是 一 个 实 常数 . 由 标准 测度 的 定义 ,积分 
Ma = [ym (42) 
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对 所 有 的 z > 0 都 收敛, 类 似 的 陈述 对 > < 0 也 成 立 . 

具有 特征 函数 w 的 概率 分 布 将 以 U 表示 - 

(a) 乱 的 存在 性 . 在 15.4 节 中 曾 证 明 , UV 的 二 阶 矩 是 有 限 的 ， 当 且 仅 当 w 是 二 
次 可 微 的 , 即 当 且 仅 当 WW' 存在 . 同样 的 论证 可 以 证 明 , 为 使 情况 是 这 样 的 , 当 且 仅 
当 测 度 M 是 有 限 的 . 换 句 话说 , U 的 二 阶 短 存在 的 充 要 条 件 是 测度 M 是 有 限 的 . 

利用 类 似 的 推理 ( 见 15.9 节 的 习题 15) 可 以 证 明 , 更 一 般 地 , 对 任 一 整数 之 
1,0 的 2k 阶 矩 存在 的 充 要 条 件 是 M 有 2k 一 2 阶 甜 . 

(b) 分 解 . 每 个 把 M 表示 为 两 个 测度 之 和 的 表达 式 M = Mi + Mz 都 以 一 个 明 
显 的 方式 , 导出 一 个 把 ww 分解 成 两 个 无 穷 可 分 特征 函数 的 因子 分 解 = ee. 如 
果 M 集中 于 一 点 上 , 那么 Mi 和 Mz 也 都 集中 于 一 点 上 . 换 句 话 说 , 如 果 w 是 正 
态 特征 函数 或 泊 松 特征 函数 ,9 那么 这 两 个 因子 e% 和 ew 也 都 是 正 态 特征 函数 或 
泊 松 特征 函数 , 但 是 任 一 其 他 的 无 穷 可 分 的 w 可 以 分 解 成 两 个 本 质 上 不 同 的 分 基 . 
特别 地 , 任 一 非 正 态 稳定 特征 函数 可 以 分 解 成 非 稳定 无 穷 可 分 特征 函数 . 

一 个 特别 有 用 的 分 解 式 w = eey” 可 以 通过 把 M 表示 为 两 个 分 别 集 中 于 区 间 
|z| < 7 和 |z| > mm 上 的 测度 之 和 而 得 到 . 对 于 后 者 我 们 利用 由 N{dz} = z-?M{dz} 
定义 的 测度 N 表示 M. 于 是 我 们 记 


WO) = (6) + ba(C) +ip6, (4.3) 

RY m0=/ .ar (4 
lzlgn 2 

wl) = 人 ec- DN{dz}, (4.5) 


差 6 一 B 说明 (4.4) 和 (4.5) 中 被 改变 的 中 心 项 . 
注意 , e”% 是 这 样 一 个 概率 分 布 产生 的 复合 泊 松 分 布 的 特征 函数 , 这 个 分 布 
五 满足 F{dz] =cN{dz}, 或 者 


1— F(z)= cM+(z),z > 0. (4.6) 
函数 e% 是 无 穷 次 可 微 的 . 于 是 我 们 看 到 , 每 个 无 穷 可 分 分 布 U 是 一 个 具有 所 有 各 
阶 答 的 分 布 1 与 一 个 复 会 泊 松 分 布 Ua 的 卷 积 , 这 个 U2 是 由 一 个 具有 与 M+ 和 
AM- 成 比例 的 尾部 的 概率 分 布 F 产生 的 . 由 此 特别 推出 , 为 使 U 具有 上 阶 拢 ， 当 
且 仅 当 五 的 大 阶 矩 存在 . 


@ 根据 15.8 节 的 定理 1, 正 态 特征 函数 不 能 分 解 为 非 正 态 符 征 函 数 . 对 泊 松 分 布 也 有 类 似 的 结论 ( 莱 
科 夫 (Raikov) 定理 ). 
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(c) 正 变量 . 我 们 来 证 明 , U 集 中 于 而 66 上 ， 当 且 仅 当 Q@ 
oo eicz _1 
vw(O) =/ zs Pt{dr} + ib, (4.7) 


其 中 b>0. 已 是 这 样 一 个 测度 ， 使 得 (1 +z)-:! 关于 也 是 可 积 的 . [ 利用 (4.1) 原来 
的 记号 , 我 们 有 P{dz} = z-1M{dz}. ] 

假设 U 集中 于 fo, co) 上 ,并 考虑 (4.3) ~ (4.5) 所 述 的 分 解 . 原点 是 复合 泊 松 
分 布 U02 的 增 点 . 分 布 Ui 的 期 望 为 0, 因而 它 有 一 个 增 点 s < 0. 由 此 推出 s+ 有 是 
UU 的 一 个 增 点 , 从 而 8 > 0. 同样 的 论证 表明 Ui 不 可 能 有 正 态 分 量 , 因此 当 7 一 0 
时 ，z 的 贡献 一 定 趋 于 0. 最 后 , 如 果 t 是 产生 Us 的 概率 分 布 下 的 一 个 增 点 ， 那 
么 nt 是 U2 本 身 的 一 个 增 点 . 由 此 推出 下 集中 于 正 半 轴 上 , 从 而 N 集中 于 正 半 轴 
上 , 因此 (4.5) 中 的 积分 的 积分 域 实际 上 是 zx > n. 被 积 函 数 在 原点 上 等 于 0, 从 而 
在 取 极 限 7 一 0 时 , 测度 N 不 一 定 有 界 . 但 是 , 对 于 z > 7, 我 们 可 以 把 测度 N 换 
成 P{dz} = zN{dz}( 此 式 和 z-1M{dz} 相同 ). 新 的 被 积 函数 (eicz -1)z-! 的 值 是 
0 以 外 的 有 界 值 , 从 而 尸 对 原点 的 邻 域 也 一 定 赋予 有 限 值 . 这 样 我 们 就 得 到 了 表达 
式 (4.7). 

反之 , 如 果 少 是 由 (4.7) 确定 的 , 那么 我 们 的 论证 说 明 , ev 是 集中 于 矶 55 上 的 
复合 泊 松 分 布 的 特征 函数 列 的 极限 . 因此 , 对 于 极限 分 布 V 也 有 同样 的 结论 成 立 . 

(d) 渐 近 性 质 . 关于 矩 的 存在 性 的 结果 似乎 表明 ， 分布 函 数 U 当 z 一 土 oo 时 
的 渐 近 性 质 只 依赖 于 标准 分 布 M 在 土 oo 附近 的 性 质 , 或 者 同样 地 ,只 依赖 于 函数 
M+ 和 AM- 的 渐 近 性 质 . 我 们 不 打算 在 尽 可 能 一 般 的 情况 下 证 明 这 个 推测 , 而 只 考 
虑 一 个 典型 情况 : 

假设 M+ 在 oo 点 处 是 正则 变化 的 ， 即 


M+(z) = 2 ZL(z)， (4.8) 
其 中 5 > 0, 工 是 缓慢 变化 的 . 那么 
1—-U(z) ~ M+(z)，z 一 oo. (4.9) 


证 ” 设 $ 是 一 个 以 为 分 布 函数 的 随机 变量 . 把 标准 测度 M 看 作 是 三 个 集中 于 
区 间 开 Si, 一 11,=66,- 了 上 的 测度 之 和 Mi + Mz + Ma. 正如 (b) 中 所 证 明 的 那样， 
这 导出 一 个 把 S 作为 三 个 独立 随机 变量 之 和 的 表达 式 5 = Xi + Xo + Xs + B: XX1 
服从 复合 泊 松 分 布 U1, 此 分 布 是 由 集中 于 五 55 上 的 概率 分 布 F 产生 并 由 (4.6) 确 


@ 这 个 结果 由 P. 列 维 给 出 , 它 也 是 13.7 节 (7.2) 拉 普 拉 斯 变换 形式 的 直接 推论 . 有 起 的 是 , 不 用 概 
率 论证 , 这 个 断言 的 形式 上 的 验证 很 麻烦 ( 见 G. Baxter and J. M. Shapino, Sankhya, vol.22). 
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定 的 ; 相应 于 Xo 的 标准 测度 集中 于 -1,1 上 ; 最 后 Xs 的 定义 方法 与 Xi 的 相同 ， 
所 不 同 的 只 是 这 里 =00; 7 起 55 的 作用 . 不 难 证 明 ， 


P{X >z}~ M+(z), £— 00. (4.10) 
( 见 8.9 节 的 定理 2). 因此 , 为 了 证 明 断 言 (4.9)， 只 需 证 明 
P{S>zj~P{X > zj，z 一 oo (4.11) 


就 够 了 . 在 这 种 情形 下 , 中 心 常数 8 不 起 作用 , 我 们 可 以 假设 6 = 0. 于 是 对 于 每 个 


* 


P{S > zj >P{X > (1+e)z}:P{X2 + Xs > -er}. (4.12) 
另 一 方面 , 因为 X3 < 0, 所 以 
P{S > 7} <P{Xi > (1—e)z} +P{X2 > ez}. (4.13) 


当 z 一 co 时, (4.12) 中 最 后 一 个 概率 趋 于 1, 而 (4.13) 中 最 后 一 个 概率 比 任何 次 寡 
zZ”” 减少 的 速度 都 快 ， 因 为 X 具有 所 有 各 阶 矩 . 因此 (4.12) 和 (4.13) 蕴含 (4.11) 
的 正确 性 . 

(e) 从 属性 . 如 果 ev 是 无 穷 可 分 的 , 那么 对 于 每 个 。 > 0,esy 也 是 无 穷 可 分 的 . 
通过 把 参数 s 随机 化 , 我 们 得 到 一 个 下 列 形式 的 新 的 特征 函数 : 


20= ectasy, 9) 


其 中 G 是 集中 于 0,co 上 的 任意 一 个 概率 分 布 . 特征 函数 不 一 定 是 无 穷 可 分 的 , 但 
是 容易 验证 , 如 果 G = G1 克 G2 是 两 个 概率 分 布 的 卷 积 ,那么 (以 明显 的 记号 ) 有 
8 三 p12. 由 此 推出 ,如果 G 是 无 穷 可 分 的 ， 那么 (4.14) 确定 一 个 无 穷 可 分 特征 
志 数 . 

这 个 结果 有 简单 的 概率 解释 . 设 {X(t)} 表示 一 个 独立 增 其 过 程 的 变量 ,X(t) 
的 特征 函数 为 ev. 如 果 了 是 一 个 分 布 为 G 的 正 变量 , 那么 yp 可 以 看 作 是 复合 随 
机 变量 X(T) 的 特征 函数 . 假设 G 是 特征 函数 为 ex 的 无 穷 可 分 分 布 . 我 们 可 以 考 
察 另 外 一 个 独立 增 量 过 程 {T(t)}, 使 得 T(t) 的 特征 函数 为 ex. 对 于 每 个 + > 0, 我 
们 得 到 一 个 新 变量 X(T(t)), 这 些 变量 也 是 一 个 独立 增 量 过 程 的 变量 . 8 于 是 T(t) 
可 作为 操作 时 间 . 利用 10.7 节 的 术语 , 新 过 程 {X(T(t))} 是 通过 从 属性 得 到 的 ， 指 
导 过 程 为 {T(t)}. 于 是 我 们 得 到 了 从 属 过 程 恒 导致 无 穷 可 分 分 布 这 个 事实 的 一 个 纯 
分 析 证 明 . 

@ 如 果 G 的 拉 普 拉 斯 变换 为 e-P(A)， 那 么 Tt) 对 应 于 拉 普 拉 斯 变换 e-tp(A)， 容易 验证 X(T(b)) 

的 特征 函数 为 e-tp(- 则 . 


514 第 17 章 无 穷 可 分 分 布 


17.5 ”稳定 分 布 及 其 吸引 域 


设 {Xn} 是 具有 共同 分 布 下 的 相互 独立 随机 变量 序列 , 令 Sn = Xi 十 … 十 Xn. 
设 U 是 一 个 不 集中 于 一 点 上 的 分 布 . 按照 6.1 节 中 引进 的 术语 , 当 且 仅 当 存 在 常数 
an > 0 和 bn 使 得 as15n 一 nbn 趋 于 U 时 , 我 们 称 属于 U 的 吸引 域 . 排除 集中 
于 一 点 上 的 极限 分 布 ,是 为 了 排除 如 下 不 足 道 的 情况 : 如 一 "而 an 如 此 迅速 地 增 
加 , 以致 于 ax15n 依 概率 收敛 于 0. 
我 们 想 用 分 布 F 和 U 的 特征 函数 yp 和 ww 来 重新 叙述 吸引 域 的 定义 . 按照 15.1 
节 的 引 理 4, 为 使 分 布 U 集中 于 一 点 上 , 当 且 仅 当 对 于 所 有 的 《,w(0)| = 1. 因此 ， 
为 使 p 属于 特征 画 数 w 的 吸引 域 ， 只 需 |w| 不 恒 等 于 1， 并 且 存在 常数 an > 0 和 
bn, 使 得 
(Pp(C/an)e ne)" = w(O). (5.1) 


在 6.1 节 中 曾 证 明 , 极限 w 一 定 是 稳定 的 , 但 是 我 们 现在 再 把 整个 理论 看 成 
17.2 节 基 本 极限 定理 的 简单 推论 来 讨论 . 为 了 与 那里 的 记号 保持 一 致 , 我 们 令 


Ppn(6) = p(C/an)e "Fn(z) = F(an(z + bn)). (5.2) 
根据 17.1 节 的 定理 1, 为 使 关系 式 (5.1) 成 立 , 关上 且 仅 当 对 于 所 有 的 《， 
nlpn(O) -Y= (0), (5.3) 


其 中 心 = ev. 

首先 考虑 下 为 对 称 分 布 的 这 一 特殊 情形 . 此 时 jn = 0. 我 们 从 17.2 节 定 理 1 
知道 ，(5.3) 蕴含, 存在 这 样 的 标准 测度 M, 使 得 nz?F,{dz} 一 M{dz}. 为 了 表示 
这 个 结论 , 我 们 引入 截 尾 矩 函数 


pg= 三 ptaoj，=>0 (5.4) 
于 是 在 所 有 的 连续 点 上 ， 
二 kanz) 一 M{=z5)}, (5.5) 
且 
nl ~ Ponzj] -Mt+(a)， (5.6) 
其 中 


Mt = yomtay). G6.) 
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| 

。 ;关系 式 p(C/an) 一 1 昔 含 on 一 co, 因此 Sn/an 和 Snyan+l 有 相同 的 极限 分 
， 布 VU. 由 此 推出 比 antay/an 趋 于 1， 从 而 8.8 节 的 引 理 3 可 应 用 于 (5.5) 我 们 得 
， 到 , /是 正则 变化 的 , 上 标准 测度 M 具有 形式 


M{=2z= cz ，z>0， (5.8) 


其 中 < 2. (为 了 与 P. 列 维 所 引入 的 用 法 一 致 , 用 2 一 a 表示 指数 . ) 如 果 a = 2， 
那么 测度 M 集中 于 原点 上 . (5.7) 中 的 积分 的 收敛 性 要 求 a > 0; 对 于 0 < a < 2， 


我 们 求 得 
M+(z)=C— oe, zr>0. (5.9) 
类 似 的 论证 也 适用 于 非 对 称 分 布 ,但 是 代替 (5.6), 我 们 得 到 如 下 不 太 吸引 


| 人 的 关系 式 ， 


mn[L 一 下 (an(z 十 加) = M+(z), 
nF(an(-Z+bn)) 一 MT-(-z)， (5.10) 


| 类 似 的 修改 适用 于 (5.5). 然而 ,pn() 一 1 和 an 一 00 这 个 事实 理 含 mn 一 0, 因此 
| “(5.10) 实际 上 完全 等 价 于 (5.6) 和 关于 左 尾部 的 类 似 关系 式 . 
| 于 是 我 们 看 到 ， 当 下 属于 一 个 吸引 域 时 (5.6) 成 立 . 由 8.8 节 的 引 理 3 看 来 ， 
， ”这 就 是 说 , 或 者 M+ 恒 等 于 0, 或 者 尾部 1 - F 正 则 变化 , 且 M+(z) = 4z-e. 于 是 
(5.7) 说 明 ,测度 M 在 正 半 轴 上 有 密度 Aaz!-。. 同样 的 论证 适用 于 左 尾部 以 及 尾 
部 之 和 , 因此 指数 a 一 定 为 两 个 尾部 所 共有 . 
如 果 2 个 尾部 都 恒 等 于 0, 那么 M 集中 于 原点 上 . 在 所 有 其 他 的 情形 下 , M 不 
。 ”可 能 在 原点 上 有 原子 . 因为 对 应 于 对 称 化 了 的 分 布 0U 的 标准 测度 oM 是 M 与 它 
， ”关于 原点 的 镜像 的 和 , 我们 已 看 到 , °M 或 者 没有 原子 , 或 者 集中 于 原点 上 . 因此 ， 
当 a < 2 时 ,标准 测度 M 被 它 在 两 个 半 轴 上 的 密度 唯一 确定 , 这 些 密度 与 |z|'-。 
成 比例 . 因此 , 对 于 包含 原点 的 区 间 =5;z, 我 们 有 


BS M{=Y,7} = Co + pz-°), (5.11) 
其 中 0<a<2,C >0,p+q=1. 对 于 a=2, 此 测度 集中 于 原点 上 . 根据 (5.7), 这 
等 价 于 5 
M+(z) = Cp: 二 
M-(-z)= Ceo (5.12) 


相应 于 这 些 测度 的 特征 函数 由 (3.18) 和 (3.19) 给 出 . 它们 表明 , 在 U2 与 U 
不 同 之 处 仅 在 于 位 置 参 数 的 意义 上 我 们 的 测度 是 稳定 的 . 这 就 是 说 , 每 个 稳定 分 布 
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属于 它 自己 的 吸引 域 , 因此 , 我 们 解决 了 求 所 有 具有 吸引 域 的 分 布 的 问题 . 我 们 把 
这 个 结果 写成 
定理 1 ”一 个 分 布 具 有 吸引 域 ， 当 且 仅 当 它 是 稳定 的 . 

(i) 稳定 分 布 类 与 具有 由 (5.11) 给 出 的 标准 测度 的 无 穷 可 分 分 布 类 重合 . 

(ij) 相应 的 特征 函数 呈 w(C) = ey(O+ix 的 形式 ， 其 中 少 由 (3.18)~(3.19) 确 
定 ,0<as&2. 

(这 ) 当 z 一 oo 时 ， 相 应 分 布 U 的 尾部 满足 


zl -DG 一 cp2 2 
zeU(-z) 一 co 二 <. (5.13) 
如 果 我 们 注意 到 U 属于 其 自身 的 吸引 域 ， 正规 化 常数 为 an = ma/, 那么 ( 疝 ) 
是 (5.6) 的 直接 推论 .| 换 句 话说 , (5.13) 是 17.4 节 (d) 中 所 得 的 结果 的 一 个 特殊 情 
形 .] 
应 注意 , 除 中 心 常数 外 , 本 定理 中 的 3 个 断言 每 一 个 都 唯一 地 确定 了 U. 
在 回 过 头 来 研究 使 分 布 F 属于 一 个 稳定 分 布 的 吸引 域 的 条 件 之 前 , 我 们 回忆 
一 下 一 个 关于 正则 变化 的 基本 结果 . 按照 8.8 节 中 的 定义 ,函数 工 在 无 穷 远 处 是 缓 
慢 变 化 的 ,如 果 对 于 每 个 固定 的 z > 0， 
工 (好 ) 
LZ() 
在 这 种 情形 下 , 我 们 对 于 任意 的 5 > 0 和 充分 大 的 z 有 
z-5 < 工 (z) < z5. (5.15) 


函数 p 是 正则 变化 的 ， 如 果 它 具有 j(z) = z?L(z) 的 形式 . 我 们 特别 地 考虑 (5.4) 
所 确定 的 截 尾 矩 函 数 人 把 8.9 节 的 定理 2( 在 其 中 令 5 = 2,7 = 0) 应 用 于 站 oo 上 
由 F(z) -F(z) 定义 的 分 布 函 数 , 我 们 就 得 到 下 列 重要 结果 : 
如 果 凡 是 正则 变化 的 ， 且 指数 为 2 一 a( 其 中 0<a<2), 那么 
Zz2[1 — F(z) + F(—z)] 17220 
A(z) a 
反之 , 如 果 (5.16) 对 a < 2 成 立 ， 那么 j4 与 尾部 之 和 


一 1，t 一 oo. (5.14) 


(5.16) 


1— F(z)+F(-z) 


都 是 正则 变化 的 ， 且 指数 分 别 为 2 一 a 和 一 aq. 如 果 (5.16) 对 a 一 2 成立， 那么 凡 
是 缓慢 变化 的 
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在 推导 (5.8) 时 我 们 看 到 , 一 个 对 称 的 下 属于 一 个 吸引 域 的 必要 条 件 是 截 尾 抢 
函数 / 为 正则 变化 的 : 
pz) ~ zeL(z), zo00, (5.17) 


其 中 工 是 缓慢 变化 的 . 我 们 现在 将 看 到 这 对 非 称 分 布 也 是 正确 的 . 当 a = 2 时 , 这 
个 条 件 也 是 充分 的 , 但 是 当 a < 2 时 标准 测度 (5.11) 赋予 正 负 半 轴 的 质量 之 比 为 
p:9, 可 以 证 明 下 的 两 个 尾部 一 定 有 同样 的 比值 . 
我 们 现在 能 够 证 明基 本 的 
定理 2 (a) 一 个 分 布 已 属于 某 一 吸引 域 的 必要 条 件 是 截 尾 矩 函 数 4 为 正则 变化 
的 , 且 具 有 指数 2 一 a(0< a<<2). [也 就 是 说 ，(5.17) 成 立 . ] 
(b) 如 果 a=2, 且 下 不 集中 于 一 点 上 ， 那么 这 个 条 件 也 是 充分 的 . 
(c) 如 果 (5.17) 对 于 0<a<2 成立 , 那么 下 属于 某 一 吸引 域 ,， 当 且 仅 当 两 个 
尾部 是 这 样 被 平衡 的 ， 以 至 于 当 并 一 co 时 ， 
1— F(z) F(-z) 
IF 十 FC 林 一 岂 I-FG)+FCS) 一 个 
注意 , 关于 书 的 中 心 常数 我 们 并 没有 作 什么 假设 . 因此 , 定理 蕴含 (5.17) 或 者 
对 任意 的 中 心 常数 都 成 立 , 或 者 对 所 有 的 中 心 常数 都 不 成 立 . 除了 当 下 集中 于 一 
点 二 时, (5.17) 的 左边 对 于 中 心 常 数 t 恒 等 于 0, 对 于 所 有 其 他 的 中 心 常数 是 正则 
变化 的 以 外 , 上 述 结论 的 正确 性 容易 验证 . 
之 所 以 这 样 叙 述 这 个 定理 ,是 为 了 包含 向 正 态 分 布 收敛. 当 a < 2 时 , 似乎 用 
五 的 尾部 之 和 比 用 oo 表示 主要 条 件 更 为 自然 . 下 列 两 个 系 以 等 价 的 形式 重新 叙述 
本 定理 . 
系 1 一 个 不 集中 于 一 点 上 的 分 布 已 属于 正 态 分 布 的 吸引 域 ， 当 且 仅 当 凡是 缓慢 
变化 的 . 
为 使 情况 是 这 样 的 ， 当 且 仅 当 (5.16) 对 a = 2 成 立 . 
不 用 说 , 当 玉 有 有 限 方差 时 , / 是 缓慢 变化 的 . 
系 2 一 个 分 布展 属于 一 个 指数 为 a < 2 的 稳定 分 布 的 吸引 域 ， 当 且 仅 当 它 的 尾 
部 满足 平衡 条 件 (5.18) ， 且 尾部 之 和 是 以 指数 a 正则 变化 的 . 
后 一 条 件 完全 等 价 于 (5.16). 
证 (a) 必 要 性 , 假设 极限 分 布 0 的 标准 测度 由 (5.11) 给 出 . 在 推导 这 个 关系 式 的 
过 程 中 我 们 看 出 , 属于 U 的 吸引 域 的 分 布 满足 (5.6) 和 关于 左 尾部 的 类 似 公式 , 从 
而 


(5.18) 


nfl ~ F(anz) + F(-anz)] =» M+(z) + M-(-s). (5.19) 


首先 假设 a < 2, 因此 右边 不 恒 等 于 0. 正 如 已 经 所 述 的 那样 , 此 时 8.8 节 的 引 
理 3 保证 尾部 之 和 1 一 下 (z)+F(-z) 是 以 指数 -a 正则 变化 的 . 但 是 , 此 时 (5.16) 
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成 立 , 从 而 /是 以 指数 2 一 a 正则 变化 的 . 于 是 平衡 条 件 (5.18) 是 (5.6) 的 直接 推 
论 . 

还 剩 下 a = 2 的 情形 . 此 时 (5.19) 的 左边 趋 于 零 , 于 是 对 于 某 个 < n,|Xk| > 
on 的 概率 趋 于 0. 因此 , 为 使 5,/an 不 依 概率 趋 于 0, 必要 条 件 是 Xkan! 的 截 尾 二 
阶 矩 的 和 是 0 以 外 的 有 界 值 . 但 是 


Han) 
I 二 Row) 十 万 CT) 一 oo， 


从 而 (5.16) 对 a = 2 成 立 . 这 蕴含 是 缓慢 变化 的 , 因此 我 们 的 条 件 是 必要 的 . 

(b) 充分 性 . 我 们 不 但 要 证 明 我 们 的 条 件 是 充分 的 ， 而 且 还 要 确定 保证 向 一 给 
定 稳定 分 布 收敛 的 正规 化 常数 an 和 bn. 这 将 在 定理 3 中 进行 . 

定理 3 的 叙述 要 用 到 下 列 事实 : 在 满足 a > 1 的 任 一 吸引 域内 的 分 布 的 期 望 
存在 . 在 证 明 中 , 我 们 将 需要 关于 截 尾 一 阶 甜 的 另外 的 知识 .在 更 一 般 的 背景 下 闭 
述 这 些 结果 是 很 自然 的 , 虽然 我 们 只 需要 6 = 1 的 特殊 情形 . 
引 理 ”一 个 属于 指数 为 a 的 吸引 域 的 分 布 局 的 所 有 8 < a 阶 绝对 答 rnp 都 存在 . 
如 果 Qa < 2, 那么 所 有 6 >a 阶 算 都 不 有 在. 

更 确切 地 说 ,如果 B < a, 那么 当 t 一 00 时 


(5.20) 


说 p 2 一 a 
5 人 F{fdz} 一 5 (5.21) 
而 对 于 a<2 和 有 8>oa 


/petaaj~ 
lzl<t 


六 2 a — FO) + Fd). (5.22) 

(注意 , 在 每 种 情形 下 , 积分 都 是 一 个 指数 为 8 - a 的 正则 变化 函数 . ) 

证 关系 式 (5.21) 和 (5.22) 表示 一 般 形式 (5.15), 并 且 是 8.9 节 中 定理 2 应 用 于 

D000 上 由 F(z) + F(z) 所 确定 的 分 布 所 得 到 的 直接 推论 ， 对 于 (5.21), 令 C = 

2,n7= 8,7 = 0. > 
在 定理 2 的 证 明 中 蕴含 正规 化 常数 an 一 定 满足 条 件 


?un) ,oo 


2 
an 


如 果 是 正则 变化 的 满足 (5.17)], 那么 这 样 的 av 就 存在 : 我 们 可 以 把 an 定义 为 
使 nz“?p(z) < C 的 所 有 z 的 下 界 . 于 是 由 正则 变化 性 , 我 们 对 于 z>0 有 


(5.23) 


Thon®) ,zn-o. (5.24) 
Qn 
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这 就 是 说 , 测度 nz?F{andz} 赋予 任 一 对 称 区 间 -=z,z 的 质量 趋 于 M{=z,z}. 由 
(5.16) 看 来 , 关系 式 (5.24) 自然 保证 关于 F 的 尾部 之 和 的 类 似 关系 式 (5.19) 成 立 . 
当 a = 2 时 , 右边 恒 等 于 0; 当 a < 2 时, 平衡 条 件 (5.18) 保证 各 个 尾部 也 满足 所 
需要 的 条 件 : 


从 
二 


nll — F(anz) 


nF(—anz) 一 Cg ea， (5.25) 


因为 右边 是 与 M+(z) 和 M-(z) 相等 的 . 顺便 提 一 下 , 当 a < 2 时 , 关系 式 (5.25) 
又 蕴含 (5.24). ] 
于 是 我 们 证 明了 测度 nz?F{andz} 正常 地 趋 于 标准 测度 M. 按照 17.2 节 定 理 
2, 这 列 含 
人 ne pandz} 


Se 
EN ei 
xr2 


一 oo 


Mf{dz}. (5.26) 


由 此 现在 容易 导出 
定理 3 设 避 是 一 个 稳定 分 布 ， 当 a 承 1 时 ,， 它 由 特征 函数 (3.18) 确定 (包括 中 心 
常数 )， 当 a = 1 它 由 特征 函数 (3.19) 确定 (包括 中 心 常数 ). 
设 分 布 下 满足 定理 2 的 条 件 , 又 设 {an} 满足 (5.23). 
介 如果 0<a<1l, 那么 pr(C/an) 一 wlC) = YO). 
(ii) 如 果 1 < a < 2, 那么 上 述 结论 同样 成 立 ， 只 要 将 下 的 中 心 定 在 期 望 为 0. 
人 ii) 如 果 a = 1， 那 么 


(ep(G/an)er —» w(C) = v0), (5.27) 

其 中 ， 
bn = J _ 二 Pd (5.28) 
因此 , 我 们 有 一 个 令 人 满意 的 结果 : 当 a < 1 时 不 需要 定 中 心 手续 ， 而 对 于 

a > 1,， 只 要 把 中 心 定 在 期 望 为 0 即 可 . 


证 设 a <1. (3.18) 中 定义 %(5) 的 积分 与 (5.26) 的 右边 不 同 之 处 在 于 项 i sinz 
消失 了 . 我 们 证 明 这 些 项 在 (5.26) 中 也 可 以 省 去 , 因此 


+o0 iz +o0 ez 一 
/ el pd} J 1. Mf{dz}. (5.29) 


一 oo 
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在 原点 的 一 个 邻 域 之 外 被 积 函 数 是 连续 的 ， 因 为 nz?F{andz} 一 M{dz}， 所 以 如 
果 把 区 间 |z| < 5 从 积分 域 中 去 掉 , 那么 关系 式 (5.29) 成 立 . 因此 只 要 证 明 , 当 5 充 
分 小 时 , |z| < 6 对 左边 积分 的 贡献 可 以 任意 小 就 行 了 . 现在 这 个 贡献 由 


F{andz} = F{di 5.30 
nf sles) = [slew (30) 
所 控制 , 具有 8 = 1 的 (5.22) 表明 右边 

~(2—a/(l -a) .co™®, 


此 式 随 5 趋 于 0 而 趋 于 0. 

因此 ，(5.29) 成 立 . 它 可 以 改写 成 nIe(C/an) - 习 一 %(6) 的 形式 . 根据 17.1 节 
定理 1, 此 式 等 价 于 断言 

yp" (C/an) 一 ny%(9) 

人 的 设 a > 1. (i) 中 所 用 的 论证 可 以 照搬 过 来 , 所 不 同 的 是 (5.26) 修改 了 的 形 
式 现在 呈 形 式 
广 ex —1—icr 

T2 


一 oo 


+oo ez 一 一 icz 


mnz2zFfandz} 一 人 x M{dz}. (5.31) 
为 了 证 明 它 是 正确 的 , 我 们 必须 证 明 , 当 t 充分 大 时 , |z| > 上 对 左边 积分 的 贡献 可 
以 任意 小 . 这 可 由 (5.21) 直接 推出 . 

( 道 ) 设 a = 1. (5.26) 无 需 改 变 , 但 是 为 了 证 明 这 个 关系 式 等 价 于 断言 (5.27)， 
必须 证 明 对 于 固定 的 ¢， 

pr(C/an) wen ee (5.32) 

或 者 等 价 地 说 ， 
nlp(C/an) —1P — 0. (5.33) 


对 于 6 < 1,F 的 绝对 矩 ne 是 有 限 的 . 我 们 由 显然 的 不 等 式 je - 1 < 2|tP 推 
出 Ip(b/an) 一 1 < 2mplC|Saw8, 从 而 (5.33) 的 左边 是 O(naz28). 但 是 , 定义 关系 式 
(5.23) 表明 , 对 于 每 个 = > 0,n = O(alt*), 所 以 (5.33) 成 立 . > 
结束 语 ”不 应 该 把 正 态 分 布 的 吸引 域 和 B.V. 格 涅 坚 科 引 入 的 一 个 指数 为 ac 的 稳定 分 布 
0 的 正 态 吸引 域 混淆. 称 一 个 分 布 F 属于 这 个 范围 , 如 果 它 以 正规 化 常数 an = na/” 属于 
U 的 吸引 域 . 确定 这 个 吸引 域 的 界限 原先 是 一 个 很 难 的 问题 , 但 是 在 目前 的 情况 下 ， 其 解 
答 由 加 在 正规 化 常数 上 的 条 件 (5.23) 给 出 . 为 使 分 布 F 属于 U 的 “ 正 态 " 吸引 域 , 当 且 仅 
当 z 一 oo 时 , z"[L- FE(z)] 一 Cp,z*F(-z) 一 Cgq. 此 处 C > 0 是 常数 ，( 顺 便 提 一 下 , 利 
用 这 个 术语 , 正 态 分 布 有 一 个 非 正 态 吸引 域 . ) 
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*17.6 稳定 密度 


以 闲 合 形式 表示 稳定 密度 似乎 是 不 可 能 的 , 但 是 费 勒 (1952) 和 贝 格 斯 特 罗 姆 
(H. Bergstr6m)(1953) 独立 地 给 出 了 它 的 级 数 展开 式 . 它们 列 含 后 来 用 更 复杂 的 方 
法 得 到 的 结果 , 它们 提供 了 健 里 叶 反 演 公 式 的 应 用 的 很 好 的 例子 (虽然 利用 了 复 积 
分 ). 我 们 不 考虑 指数 a = 1 的 情形 . 

对 于 > 0 我 们 可 以 把 稳定 特征 函数 写成 e-*” 的 形式 , 其 中 a 是 一 个 复 常 
数 . 它 的 绝对 值 只 影响 到 尺度 参数 , 因此 我 们 可 以 设 a 的 模 为 1 并 记 a = es/?, 其 
中 v 是 一 个 实数 . 于 是 我 们 令 


(6) = 一 Ke et (6.1) 


其 中 当 5 > 0 时 取 上 面 的 符号 , 当 5 < 0 时 取 下 面 的 符号 . [ 见 标准 型 (3.18)] 实 部 与 
虚 部 之 比 服从 (3.18) 中 显然 的 不 等 式 ; 利用 现在 的 记号 ，ey 是 稳定 的 ， 当 且 仅 当 


ms{ 如 果 0<a<1， 


2-a, 如 果 1<a<2. (63) 


因为 e* 是 绝对 可 积 的 , 所 以 相应 的 分 布 有 密度 . 我 们 将 用 p(z; oz) 表示 它 ,并 着 
手 用 15.3 节 (3.5) 傅 里 叶 反 演 公式 来 计算 它 ， 由 于 已 经 知道 p 是 实 的 , %(-5) 是 
(0) 的 共 思 函 数 , 我 们 得 到 


p(zioz) = Re 人 -iseem /2 ge. (6.3) 
0 
只 要 对 z > 0 计算 这 个 函数 就 行 了 ,因为 
p(—Z; az) = p(ziay ~—v). (6.4) 


(a) a < 1 的 情形 . 把 被 积 函 数 看 作 是 复 变 量 ( 的 函数 . 当 z > 0, Im 一 -oo 时 ， 
被 积 函数 由 于 指数 中 线性 项 占 优势 而 趋 于 0. 这 样 我 们 能 够 把 积分 路 线 移 到 负 半 虚 
轴 , 这 相当 于 利用 代 换 5 = (t/z)e-i3* 和 像 所 有 系数 都 是 实数 那样 进行 . 新 的 被 积 
函数 呈 et 的 形式 . 利用 er 的 指数 展开 式 和 我 们 所 熟悉 的 工 积分 可 以 推出 


一 上 


p(—z;a,v) = Re 二 二 Peety 上 (~ exp ze 一 a]) : (6.5) 
k=0 


* 本 节 讨论 一 个 特殊 的 课题 , 初 读 时 可 以 略 去 - 
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(b) 1 < a < 2 的 情形 . 利用 形式 代 换 
《= 如 -Lexp (- 和 wa) 


的 合理 性 可 以 像 在 a < 1 的 情形 那样 说 明 , 新 的 被 积 函 数 呈 e-t-<* tc-:1 的 形 
式 . 把 er 展 成 指数 级 数 , 我们 得 到 


ne) -让 eon (开导 于 共 人 (een [到 ea 


nl 


把 求 和 指标 n 变 为 一 1 并 利用 熟知 的 递 推 公式 T(s + 1) = sT(s), 我 们 可 得 
p(-z;a,v) = 去 Mi A 4) . (- Texp [太志 (v— a]). (6.7) 


因此 , 我 们 证 明了 
引 理 1 对 于 z>0 和 0<a<l, 


1 世 T(ka+1 只 - 
pzioo)= 元 志 It (eo)sin TF -0). (6.8) 
对 于 z>0 和 1<a<2， 


1 疡 TU It kr 
p(z; a,v) -起 *(—z)* sin 0) (6.9) 
当 Z<0 时 , 它们 的 值 由 (6.4) 给 出 . 
注意 , (6.8) 给 出 了 z 一 co 时 的 渐 近 估计 . 这 些 公式 的 一 个 奇特 的 副产品 如 下 : 
引 理 2 如 果 了 <a<1z>0, 那么 


1 1 1 
ZoriP 人 去 0 = p(x; a,v"), (6.10) 


其 路 二 a(v+1) 一 1 
利用 简单 的 验算 可 以 证 明 wv* 落 在 (6.2) 所 述 的 范围 内 , 恒等式 (6.10) 是 佐 洛 
塔 亡 夫 (V. M. Zolotarev) 用 复杂 的 证 明 首次 得 到 的 . 


17.7 三 角形 阵列 


三 角形 阵列 的 概念 在 6.3 节 中 是 这 样 给 出 的 . 对 于 每 个 nm， 有 有 限 多 个 ， 比 如 
说 rn 个 分 布 为 及， 特征 函数 为 pen 的 独立 随机 变量 Xkn(k = 1,2,…,rn). 我 
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们 组 成 行 和 Sn = Xin 十 … 十 Xr.n, 分 别 用 Un 和 wn 表示 它 的 分 布 和 特征 函数 . 
根据 6.3 节 中 所 说 明 的 理由 , 我 们 主要 对 各 个 分 量 的 影响 是 渐 近 可 忽略 的 阵列 感 兴 
趣 . 为 了 保证 这 一 点 , 我 们 加 上 6.3 节 (3.2) 这 个 条 件 : 变量 Xk 对 大 = 1,2,…, rn 
依 概率 一 致 地 趋 于 0. 利用 特征 函数 , 这 就 是 说 , 给 定 。 > 0 和 Go > 0, 对 于 所 有 充 
分 大 的 n 有 
I1 -pen(Ol <e, ll < k=1,,rn. (7.1) 

这 样 的 阵列 称 为 替 阵 列 . 

实际 上 17.1 节 和 17.2 节 讨论 的 是 分 布 FE,n 不 依赖 于 的 三 角形 阵列 , 这 样 
的 阵列 自然 是 零 阵列 . 条 件 (7.1) 使 得 我 们 能 利用 开头 两 节 所 述 的 理论 . 特别 ， 现 
在 将 证 明 , 主要 的 结果 可 以 搬 到 任意 的 零 阵列 上 : 如 果 行 和 Sn 的 分 布 越 于 一 个 棚 
限 ， 那 么 这 个 极限 是 无 穷 可 分 的 . @ 我 们 将 证 明 一 个 向 指定 的 无 穷 可 分 分 布 收敛 的 
精确 准则 . 

为 了 读者 的 方便 , 我 们 回忆 一 下 标准 测度 的 定义 ,一 个 测度 M 是 标准 的 ， 如 
果 它 对 有 限 区 间 赋 予 有 限 质 量 M{I}, 并 使 积分 


Mato= vomtay, Me)= vm) (72) 


对 每 个 x > 0 都 存在 . (17.1 节 的 定义 1. ) 
为 了 简化 记号 , 我 们 引入 由 


Ma{dz} = D2 Fndz) (73) 
k=1 


定义 的 测度 Mn. 这 测度 类 似 于 上 节 中 测度 nz?F,{dz}. 按 (7.2) 类 推 , 对 z > 0， 
我 们 令 


M+ (a) = Dl — Fon)], 
k=1 


M (7) = 立 Fn(—2). (7.4) 
大 =1 


我 们 将 广泛 使 用 截 尾 变量 , 但 是 我 们 将 把 标准 的 截 尾 程 序 稍 作 修改 ， 以 避免 
由 于 利用 不 连续 函数 而 产生 的 复杂 化 . 修改 过 的 程序 把 随机 变量 X 换 为 截 尾 变量 
7(X), 其 中 7 是 这 样 的 连续 单调 西数 ,使 得 


7(z) = { Sr, bse (75) 


士 a lz| > a. 


@ 关于 这 个 结果 对 非 平稳 的 独立 增 量 过 程 的 意义 , 见 17.1 节 的 结束 语 。 
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[显然 7(-z) = -r(z)] 关于 截 尾 变 量 的 期 望 , 我 们 记 
Ben =E(rCXen), 
bn=D Ben, Bn=D Pe 59 
k=1 k=1 


从 理论 上 讲 , 可 以 用 这 样 的 方式 定 Xk.n 的 中 心 使 所 有 的 Bkwn 都 等 于 0. 这 可 
以 简化 论证 , 但 是 所 得 到 的 准则 在 许多 具体 情况 下 不 能 直接 应 有 . 但 是 , 通常 可 以 
这 样 定 Xk,n 的 中 心 使 Bk,n 充分 地 小 , 以 致 于 Bn 一 0. 在 这 种 情形 下 , 下 一 定理 的 
条 件 化 为 上 几 节 中 常用 的 条 件 Mn 一 M. 在 一 般 情形 下 ,对 于 到 原点 有 一 个 正 距 
离 的 区 间 1, 我 人 有 Mn{7} 一 M{ 了 }, 但 是 原点 的 邻 域 受到 Bn 的 影响 . ( 截 尾 点 的 
选取 没有 影响 .) 
定理 。” 设 {Xkn} 是 零 阵列 . 如 果 可 以 找到 这 样 的 常数 bn， 使 得 Sn 一 bn 的 分 布 趋 
于 极限 分 布 [那么 (7.6) 中 的 如 也 是 如 此 . @ 极限 分 布 [是 无 穷 可 分 的 .四 

为 使 向 一 个 标准 测度 为 M 的 极限 U 的 收敛 发 生 ， 当 且 仅 当 在 所 有 的 连续 点 
弟 光 和 于 


At) = M+ (2), Mi (5) =» M-(z), (77) 
并 且 对 于 某 个 s> 0， 
Ma{=55} — Bn = M{=55}. (7.8) 
在 这 种 情形 下 ，S bn 的 分 布 超 于 由 
Ce 
vO= 人 tas (7.9) 


确定 的 特征 画 数 册 一 eV 的 分 布 . 

条件 (7.8) 在 所 有 连续 点 上 自然 成 立 . ] 
证 ”我们 分 步 进 行 . 

(a) 首先 假设 所 有 的 变量 Xk,n 是 对 称 的 , 因此 Sn 的 分 布 一 定 无 需 预先 经 过 定 
中 心 就 收敛 . 特征 函数 pkn 是 实 的 , 由 (7.1) 知 , 只 要 m 充分 大 , 泰勒 展开 式 


-eun(O) = [1 — pkn(O + $l — pinl OF + (7a0) 
对 任意 的 成 立 . 问题 是 , 是 不 是 有 


Din pinld) = YO). (711) 
k=1 


@ 对 于 标准 截 尾 , 即 如 果 把 7 换 成 在 |z| > a 外 等 于 0 的 截 尾 函数 ,定理 仍然 成 立 . 为 了 避免 记号 的 
复杂 化 , 必须 假设 M 在 a 上 没有 原子 . [证明 的 (b) 部 分 变 得 更 复杂 ， 因 为 不 可 能 找到 这 样 的 9 
使 得 E(r(X +9)) =0.] 

@ 集中 在 一 点 上 的 分 布 是 无 穷 可 分 的 , 相应 的 标准 测度 恒 等 于 0. 
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(7.10) 中 展开 式 的 所 有 的 项 都 是 正 的 ， 从 而 (7.11) 要 求 线性 项 之 和 是 有 界 的 . 由 
(7.1) 知 ,这 蕴含 高 阶 项 的 贡献 是 渐 近 可 忽略 的 . 由 此 我 们 知道 ,为 使 (7.11) 成 立 ， 
当 且 仅 当 


和 eun(O -1 一 WO. Ga) 
1 


左边 可 以 写成 m[prn 一 赴 的 形式 , 其 中 pn 是 分 布 Fn 的 算术 平均 的 特征 函数 . 于 
是 我 们 讨论 的 是 17.2 节 定 理 2 的 一 个 特殊 情形 ， 因 此 可 以 断言 ,为 使 形 如 (7.12) 
的 关系 式 成 立 ， 当 且 仅 当 存在 一 个 标准 测度 M 使 得 Mn 一 M. 当 Bn = 0 时 , 条 
件 (7.7)~(7.8) 等 价 于 Mn 一 M; 因为 对 于 一 个 到 原点 有 正 距离 的 区 间 T，(7.7) 比 
含 关系 式 Mn{T} 一 M{ 了 }. 这 就 对 于 对 称 分 布 证 明了 定理 . 

(b) 其 次 假设 对 于 所 有 的 上 和 n, Bk,n = 0. 我 们 将 证 明 , 除非 


Donn) -1 < C0), (7.19) 
k=1 


即 除非 左边 之 和 是 有 界 的 , 否则 (7.11) 不 可 能 发 生 . 在 这 种 情形 下 , (7.11) 和 (7.12) 
仍 是 等 价 的 ，(a) 中 所 用 的 最 后 论证 也 把 本 断言 化 为 17.2 节 定 理 2. 固然 , 这 个 定 
理 涉及 一 个 利用 sinz 而 不 是 利用 r(z) 的 中 心 常数 ,但 这 被 极限 分 布 的 相应 变 
化 所 抵偿 ,因为 


mt mt {OeMas). C14) 
为 了 用 (7.11) 推导 (7.13), 我 们 从 因为 Bk,n = 0 而 成 立 的 恒等式 
Jun(5) —1= 了 er 一 1-icr(z)]Fkn{fdz} (7.15) 


开始 ， 对 于 |z| < o， 被 积 函 数 等 于 eX* - 1 - Xz， 并且 由 62z2 所 控制 . 因为 
(al < a, 所 以 


和 een(O =I < SMa{=60} + (24a)MtG) + Mz (0). (719) 
k=1 


为 了 证 明 M+(a) 一 定 是 有 界 的 ， 我 们 考虑 通过 把 {Xi,n} 对 称 化 而 得 到 的 阵 
列 {9Xkn}. 关于 零 阵列 的 条 件 (7.1) 蕴含 对 于 充分 大 的 n, 事件 


Xin > Xkn—e 
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的 概率 对 所 有 的 < r 都 大 于 于 于 是 Mi(a) < Mt (a). 我 们 知道 , 如果 收 化 
发 生 , 那么 后 一 个 量 是 有 界 的 . 我 们 得 到 ,在 收 全 的 情形 下 ,M+ (o) + Mz (-a) 是 
有 界 的 ， 从 而 


和 pknG@ -下 = Ma 村 :en()， (7.17) 
k=1 


其 中 en 表示 一 个 趋 于 0 的 量 . 另 一 方面 ， (7.15) 中 被 积 函 数 的 实 部 不 改变 符号 . 对 
|z| < a 和 充分 小 的 《, 它 的 绝对 值 > 36?z?, 从 而 


Rey (rn(O-D > TCM 可 (718) 
k=1 


最 后 这 两 个 不 等 式 表明 (7.11) 的 左边 不 可 能 是 有 界 的 , 除非 Mn{=a,4} 是 有 
界 的 , 在 这 种 情形 下 (7.16) 蕴含 (7.13). 

(©) 我 们 最 后 转向 任意 的 零 阵列 {Xk,n}. 因为 E(7(Xkn 一 9)) 是 9 的 连续 单调 
函数 , 这 里 9 从 a 变 到 -a, 所 以 存在 唯一 的 一 个 值 9kn 使 得 变量 Ykn = Xk,n 一 Okwn 
满足 条 件 E(7(Yi,n)) = 0. 显然 , {Yen} 是 零 阵列 ， 从 而 定理 可 应 用 于 它 . 

于 是 我 们 求 出 了 可 能 的 极限 分 布 的 一 般 形 式 , 但 是 收敛 条 件 是 利用 Yi,n 的 人 
为 地 定 中 心 了 的 分 布 的 测度 Nn{dz} = Bz?Fi,n{9kn 十 dz} 来 表示 的 . 换 句 话 说 , 当 
在 (7.7) 和 (7.8) 中 把 Mn 换 成 Na, 把 Bn 换 成 0 时, 我 们 证 明了 定理 . 

为 了 消除 中 心 常数 bk,n, 我 们 回忆 一 下 , 它们 一 致 趋 于 0, 从 而 最 终 有 


M+(T+ée) < N+(z) < M+(z — e). 


由 此 推出 条 件 (7.7) 可 相互 交换 地 适用 于 这 两 个 阵列 . 
在 讨论 条 件 (7.8) 以 前 , 我 们 证 明 阵列 {Yi,n} 和 {Xin 一 Bkn} 有 相同 的 极限 
分 布 , 即 


ra 
bn— DOkn— 0. (7.19) 
k=1 


设 Zhin = T(Yksn) 一 T(Xkn) + 9k,n. 由 7 的 定义 显然 可 见 Zi,n 等 于 0, 除非 
Xkn > |a 一 9kn|, 并 且 即 使 在 那里 也 有 |Zkn| < |9k,n| 一 0. 因此 条 件 (7.7) 保证 


和 GZsaJl= 和 ee ~ Oknl = 0, (7.20) 
k=1 k=1 


此 式 比 (7.19) 强 . 
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最 后 我 们 讨论 条 件 (7.8). 我 们 利用 符号 = 表示 当 n 一 co 时 两 边 之 差 趋 于 0. 
当 (7.7) 和 (7.20) 成 立时 , 易 见 


rn 
Mn{—aa} ~ Bn ~ > (z — Ok.n)? Fk,n{dz} 
k=1" lzl<a 
rm 


~) / VFen{dy + Orn} ~ Nn{=ara}, (7.21) 
k=1 lyl<a 


因此 (7.8) 等 价 于 关于 阵列 {Yi,n} 的 相应 条 件 . > 

例 定 中 心 的 作用 . 对 于 下 = 1,…,n, 设 Xkn 服从 期 望 为 n-*, 方差 为 n-1 的 正 

态 分 布 . 如 果 把 它们 的 中 心 定 在 期 望 为 0, 那么 极限 分 布 存在 , 并 且 是 正 态 的 . 但 是 ， 

对 于 中 心 常数 k,n = n-#, 我 人 有 Bn ~ 2Vii 一 co. 由 此 推出 Mn{=ay6} 一 oo. 本 

例 说 明 , 如 果 容 许 任意 的 中 心 常数 ,那么 定理 的 非 线性 形式 是 不 可 避免 的 . 还 证 明 

了 ,在 这 种 情形 下 ,只 考虑 In pr,n 的 展开 式 (7.10) 中 的 线性 项 是 不 够 的 . [ 
关于 进一步 的 结果 见习 题 17 和 习题 18. 
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作为 上 一 定理 的 威力 的 例证 , 我 们 给 出 一 个 由 P. 列 维 发 现 的 定理 的 一 个 简单 
证 明 . 我 们 再 一 次 讨论 相互 独立 随机 变量 的 部 分 和 Sn = X1 十 … 十 Xn, 但 与 17.5 
节 相反 ,容许 X 的 分 布 Fn 依赖 于 n. 我 们 令 5; = (Sn 一 bn)/an, 并 希望 在 假设 


Sd 1 
an 


下 刻 划 {5%} 的 可 能 的 极限 分 布 的 特征 . 第 1 个 条 件 排除 了 将 在 17.10 节 中 讨论 的 
收敛 级 数 Xi. 由 第 2 个 条 件 所 避免 的 情形 最 好 用 下 例 说 明 . 
例 “ 设 X 服从 期 望 为 nl 的 指数 分 布 . 令 an = nl,bn = 0. 显然 ,5* 的 分 布 趋 于 期 
望 为 1 的 指数 分 布 ,但 是 收敛 完全 是 由 于 项 X， 占 优势 > 
遵循 辛 钦 的 说 法 ,通常 说 一 个 分 市 属于 类 二 如果 它 是 一 个 满足 条 件 (8.1) 的 
序列 {[S%] 的 极限 分 布 . 
在 这 种 盖 述 中 , 我 们 不 能 清楚 地 看 出 . 类 工 中 的 所 有 分 布 都 是 无 穷 可 分 的 , 但 
是 我 们 将 把 这 个 结果 作为 下 列 引 理 的 推论 来 证 明 . 
引 理 ”特征 函数 由 属于 类 厂 ， 当 且 仅 当 对 于 每 个 0 <s < 1, 比 w(C)/u(s6) 是 一 个 
特征 函数 . 


* 本 节 讨 论 较 专门 的 课题 . 


Qn 一 00, 


(8.1) 
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证 (a) 必要 性 . 用 wn 表示 5; 的 特征 函数 , 设 mn > mm. 变量 5S; 是 (am/an)S% 与 
一 个 只 依赖 于 Xm+1,…, Xn 的 变量 之 和 . 因此 


wn(C) = wm(Cam/an) : pmn(O), (8.2) 


其 中 prmn 是 一 个 特征 函数 . 现在 令 n 和 m 以 这 样 的 方式 趋 于 oo, 使 得 am/an 一 
5 < 1. [由 (8.1), 这 是 可 能 的 . ] 左边 趋 于 w(C), 右边 的 第 一 个 因子 趋 于 w(sC), 因为 
特征 函数 的 收敛 在 有 限 区 间 内 是 一 致 的 . (15.3 节 的 定理 2. ) 我 们 首先 断言 , 没 
有 零点 . 事实 上 ,因为 pm,n 是 有 界 的 ， 所 以 w(Go) = 0 蕴含 w(sGo) = 0， 从 而 蕴含 
对 于 所 有 的 尼 > 0,w(s*Go) = 0, 而 实际 上 w(s*bo) 一 1. 于 是 ， 比 w(C)/w(sC) 作为 
特征 函数 pm 的 连续 极限 出 现 , 因此 是 特征 函数 . 

(b) 充分 性 . 上 述 论证 说 明 w 没有 零点 ， 从 而 我 们 有 恒等式 

w(20) w(ng) 
“0) = woG 1 

在 引 理 的 条 件 下 ,因子 w(kC)/w((k - D6) 是 一 个 随机 变量 Xk 的 特征 函数 ， 从 而 
w(6) 是 (Xi +… 十 Xn) 的 特征 函数 . > 

我 们 不 但 证 明了 引 理 , 而 且 发 现 w 是 一 个 三 角形 阵列 中 第 n 个 行 和 的 特征 函 
数 . 显然 , 满足 关于 零 阵列 的 条 件 (7.1), 从 而 w 是 无 穷 可 分 的 , 为 了 求 出 确定 
的 标准 测度 M, 我 们 要 注意 到 比 w(C)/w(sC) 是 无 穷 可 分 的 , 正如 从 因子 分 解 (8.3) 
所 看 到 的 那样 . 确定 w(5)/w(s6) 的 标准 测度 N 与 M 由 恒等式 


N{dz} = M{dz} — s2M{s-ldz} (8.4) 


(8.3) 


相 联系 . 利用 函数 M+ 和 M-, 这 个 关系 式 可 写成 
N+(z) = M+(z) - M+(z/s), 
N-(-z) = M-(-z) — M-(-z/s). (8.5) 


我 们 已 经 证 明了 , 如 果 标准 测度 M 确定 类 工 的 一 个 特征 函数 w, 那么 对 每 个 
0 < s<1, 在 (8.5) 中 所 确定 的 函数 N+ 和 N- 一 定 是 单调 的 . 反之 , 如果 这 是 正 
确 的 , 那么 (8.4) 定义 了 一 个 确定 w(6)/w(s) 的 标准 测度 . 于 是 我 们 证 明了 
定理 ”特征 函数 由 属于 类 地， 当 且 仅 当 它 是 无 穷 可 分 的 ， 并 且 它 确定 的 标准 测度 
MM 使 (8.5) 中 的 两 个 画 数 对 每 个 国定 的 0< s < 1 是 单调 的 . 
注 ”容易 验证 , 为 使 那 两 个 函数 是 单调 的 , 当 且 仅 当 M+(e*) 和 M-(-ez) 是 凸 函 
数 . 
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正如 我 们 已 经 看 到 的 那样 , 分 布 F 不 一 定 属于 任 一 吸引 域 , 这样 就 产生 了 一 
个 问题 在 它 的 逐次 卷 积 序列 {F"*} 的 渐 近 性 质 中 是 不 是 存在 一 个 一 般 的 模型 ? 
一 个 令 仍 丧 的 答案 是 , 实际 上 每 一 个 可 以 想象 到 的 性 质 都 可 能 出 现 , 看 不 出 有 什 
么 一 般 的 正则 性 . 我 们 之 所 以 讨论 几 种 可 能 性 , 主要 是 由 于 它们 的 奇特 性 质 . 

当 且 仅 当 存在 正规 化 常数 ar,br 和 一 列 整数 nr 一 00, 使 得 

[p(S/ar)e J" — 7(0) (9.1) 

时 ， 我 们 称 特征 函数 p 属于 1? 的 部 分 吸引 域 . 这 里 我 们 认为 ?| 不 恒 等 于 1, 即 相 
应 的 分 布 不 集中 于 一 点 . 于 是 (9.1) 通过 考虑 子 序列 的 极限 而 推广 了 吸引 域 的 概念 . 

由 17.1 节 定 理 2, 极限 7 一 定 是 无 穷 可 分 的 . 下 列 例子 将 说 明 两 种 极端 都 是 可 
能 的 ， 存在 不 属于 任 一 部 分 吸引 域 的 分 布 , 也 存在 属于 每 一 个 无 穷 可 分 的 部 分 吸引 
域 的 分 布 . 
例 (a) 17.3 节 例 (f) 给 出 了 这 样 一 个 特征 函数 p, 它 是 非 稳 定 的 , 但 属于 它 本 身 
的 部 分 吸引 域 . 
例 (b) 具有 缓慢 变化 尾部 的 对 称 分 布 不 属于 任 一 部 分 吸引 域 . 假设 L(z) = 1 一 
F(z) + f(z) 在 无 穷 远 处 是 缓慢 变化 的 . 根据 8.9 节 的 定理 2, 在 这 种 情形 下 ， 


U(z)= ” YFP{dy} = olz27(z))，z 一 oo. (9.2) 


按照 17.7 节 的 定理 , F 属于 某 一 部 分 吸引 域 的 必要 条 件 是 当 n 跑 遍 一 个 适当 的 序 
列 时 , n[1 一 F(anz) + (anz)] 和 naz2U(anz) 在 所 有 连续 点 上 收敛 . 第 一 个 条 件 
要 求 nL(an) ~ 1, 第 2 个 条 件 要 求 nL(an) 一 00. 

例 (c) 一 个 无 穷 可 分 的 Y 不 一 定 属于 它 本 身 的 部 分 吸引 域 . 实际 上 , 由 17.1 节 
定理 1 推出 , 如 果 p 属于 Y 的 吸引 域 , 那么 无 穷 可 分 特征 函数 e?-! 也 是 如 此 , 上 
例 说 明 ee-! 不 属于 任 一 部 分 吸引 范围 . 

例 (d) ”作为 叙述 以 下 例子 中 奇特 情况 的 准备 , 我 们 来 证 明 下 列 命题 , 考虑 任意 一 
列 具 有 有 界 指数 的 无 穷 可 分 特征 函数 w = eyr. 令 


XA) = 》 办 (akC)/mk- (9.3) 
k=1 


可 以 用 这 样 的 方式 选取 常数 ak > 0 和 整数 nk, 使 得 当 7 一 co 时 对 于 所 有 的 〈， 


nrA(C/ar) 一 办 (9 一 0. (9.4) 
* 本 节 讨论 较 专门 的 课题 
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证 取 {nx} 为 一 列 如 此 迅速 单调 递增 的 整数 ， 以 致 于 nk/mkx-l > 2* max wx|. 于 
是 (9.4) 的 左边 由 下 式 所 控制 : 


rT—l oo 
nr Do wel(Car/ar)l+ 》 2 下 (9.5) 
k=1 大 二 r 十 1 

我 们 递 推 地 选取 系数 or 如 下 . 令 o = 1. 若 已 知 a1,…,ar_1, 选取 or 如 此 之 大 ， 
以 致 对 所 有 的 |C| < r， 基 (9.5)< 1/7. 这 是 可 能 的 ,因为 第 一 个 和 连续 地 依赖 于 〈， 
而 对 于 5 二 0 它 等 于 0. 

例 (e) ”每 个 无 穷 可 分 特征 函数 w = ev 部 有 一 个 部 分 吸引 域 . 实际 上 ， 我 们 知道 
中 是 一 列 复合 泊 松 型 特征 函数 wx = evk 的 极限 . 用 (9.3) 定义 和 , 并 令 p = ex. 那 
么 是 一 个 特征 函数 ，(9.4) 说 明 


lim yp™ (¢/ar) = limev"(®) = w(¢). (9.6) 


例 (f) 变形 . 设 er 和 es 是 两 个 无 穷 可 分 特征 函数 , 这 样 选取 (9.3) 中 的 项 , 使 得 
Yok 一 ,Wzk+1 一 B. 由 (9.4) 推出 , 如 果 序 列 vA(C/ax,) 收敛 , 那么 极限 一 定 是 a 
和 有 的 线性 组 合 . 换 句 话说 , ex 属于 所 有 形 如 er*+98 的 特征 函数 的 部 分 吸引 域 , 而 
不 属于 其 他 的 部 分 吸引 域 . 本 例 容易 推广 . 利用 凸 集 的 术语 可 以 证 明 ,一 个 分 布 环 
可 以 属于 ?个 指定 的 无 穷 可 分 分 布 的 凸 包 中 的 所 有 分 布 的 部 分 吸引 域 . 
例 (g) 给 定 一 列 无 穷 可 分 特征 函数 em,e™?，.…, 那么 存在 一 个 p 二 e*, 它 属 于 每 
个 特征 函数 em 的 部 分 吸引 域 . 把 整数 分 成 无 穷 多 个 子 序列 . (例如 , 设 第 n 个 子 序 
列 包 含 所 有 可 被 2" :整除 但 不 可 被 2? 整除 的 整数 . ) 于 是 我 们 可 以 在 例 (d) 中 选 
取 这 样 的 ,使 得 当 7 跑 遍 第 n 个 子 序列 时 录 一 an 利用 这 种 选择 ，(9.4) 表明 
%= ex 具有 所 要 求 的 性 质 . 
例 (h) 多 近 林 的 “ 普 记 定律 ". yp 可 能 属于 每 个 无 穷 可 分 的 w 的 部 分 吸引 域 . 实 
际 上 , 显然 , 如果 yp 属于 wi,w2,… 的 部 分 吸引 域 , 且 wn 一 ww, 那么 yp 属于 的 
部 分 吸引 域 . 因为 只 存在 可 数 多 个 无 穷 可 分 的 特征 函数 , 使 它们 的 标准 测度 集中 于 
有 限 多 个 有 理 点 上 且 只 有 有 理 质量 . 因此 , 我 们 可 以 把 这 些 函 数 排 列 成 一 个 简单 的 
序列 em ,em>,…. 于 是 每 个 无 穷 可 分 的 w 是 {e*k} 的 子 序列 的 极限 . 上 例 的 特征 函 
数 p 属于 每 个 ak 的 部 分 吸引 域 , 从 而 也 属于 w 的 部 分 吸引 域 . 

[ 注 . 最 后 一 个 结果 是 W. 多 勃 林 根据 辛 饮 1937 年 的 早期 著作 , 在 1940 年 的 一 个 巧妙 
的 研究 中 获得 的 . 那 时 解决 这 个 问题 所 过 到 的 方法 上 的 困难 是 难以 克服 的 ，B. V. 格 涅 坚 
科 , A. 辛 钦 和 P. 列 维 在 特殊 情形 下 发 现 了 例 (b) 的 现象 . 注意 一 下 在 正则 变化 的 基本 现象 
未 被 真正 理解 时 特例 中 所 遇 到 的 复杂 化 将 是 有 趣 的 . ] 
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设 X1,X2,… 是 特征 函数 为 pt,9a,… 的 独立 随机 变量 ， 和 在 (7.5) 中 一 样 ， 
我 们 用 7 表示 一 个 单调 连续 截 尾 函 数 ， 此 函数 当 |z| < a 时 由 r(z) = z 定义 , 当 
lz| > a 时 由 r(z) = 士 a 定义 . 无 穷 卷 积 的 基本 定理 表明 ， 部 分 和 XI 十 … 十 Xn 的 
分 布 收敛 于 一 个 概率 分 布 U， 当 且 仅 当 


Tver(r Ce) <%, SPp{lxy >a}<%, (10.1) 
k=1 k=1 
且 
DE((XK)) 一 中 (10.2) 
k=1 
其 中 5 是 一 个 数 . 


8.5 节 讨论 了 有 限 方差 的 特殊 情形 以 及 例子 和 应 用 . 此 定理 以 相当 一 般 的 形式 
出 现在 9.9 节 中 , 其 中 的 结果 也 可 以 通过 证 明 级 数 沁 X， 的 收敛 性 (“三 级 数 定理 ”) 
来 推广 , 我 们 曾经 证 明 过 此 定理 是 三 角形 阵列 的 基本 定理 的 一 个 简单 推论 ， 从 而 无 
需 重复 论证 , ?因此 , 我 们 将 满足 于 说 明 特 征 函 数 的 应 用 的 例子 . 
例 (a) ”均匀 分 布 的 因子 分 解 设 Xk = 2- 的 概率 都 是 3. 在 1.11 例 (c) 中 曾 
非 正式 地 证 明了 , 可 以 把 半 Xi 看 作 “在 1 和 -1 之 间 随 机 选 出 的 一 个 数 ”. 这 相当 
于 下 述 断 言 : 均匀 分 布 的 特征 函数 (sin 《4)/C 是 特征 函数 cos(C/2*) 的 无 穷 乘 积 . 为 
了 给 出 一 个 分 析 证 明 , 我 们 从 恒等式 
sin sin(C/2" 
ee 
开始 , 此 式 可 以 按照 归纳 法 利用 公式 sin 2a = 2sinacosa 证 明 . 当 n 一 oo 时 , 最 
后 一 个 因子 在 任 一 有 限 区 间 内 一 致 地 趋 于 1. 
注意 ， 偶 数 项 的 乘积 仍 对 应 于 独立 随机 变量 之 和 . 我 们 从 1.11 节 例 (d) 知道 ， 
这 个 和 具有 康 托 型 的 吉 异 分 布 . 9 


* 本 节 讨 论 一 个 专门 的 课题 . 

@ 直接 验证 条 件 (10.1)~(10.2) 保证 乘积 p1 … pn 在 每 个 有 限 区 间 上 一 致 收敛 将 是 一 个 很 好 的 练习 . 
条 件 的 必要 性 不 是 明显 的 , 但 是 若 注 意 到 第 n 行为 Xn, Xn+1,……，,Xn+rn 的 三 角形 阵列 一 定 满足 
17.7 节 定 理 的 条 件 (在 其 中 令 M = 0), 就 容易 推出 必要 性 . 

@ G. Choquet 给 出 了 适用 于 更 一 般 无 穷 卷 积 的 有 趣 几 何 证 明 ， 在 A. Tortrat，J. Math. Pures.， 
Appl., vol. 39(1960)pp.231-273 中 给 出 这 个 证 明 . 


(10.3) 
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(见习 题 5、 习 题 7 和 习题 19. ) 
例 (b) 设 丈 具有 密度 了 和 特征 函数 1/(1+C?). 于 是 民 丈 /收敛 . 对 于 特征 
函数 , 我 们 得 到 nC/ sin hr 的 标准 乘积 表达 式 , 其 中 sinh 表示 双 曲 正弦 . 利用 15.9 
节 中 的 习题 8, 我 们 可 求 出 于 殉 人 的 密度 为 1/(2 二 er +e*) = 1/4(cosh(z/2))2. 


17.11 ”高 维 的 情形 


本 章 所 述 的 理论 无 需 本 质 上 的 改变 就 可 搬 到 高 维 中 去 ， 我 们 将 不 给 出 所 有 的 
细节 . 在 无 穷 可 分 分 布 的 标准 形式 中 , 最 好 把 正 态 分 基 分 离 出 来 ,只 考虑 在 原点 上 
没有 原子 的 标准 测度 . 于 是 只 要 把 Cz 看 作 15.7 节 中 所 述 那 种 形式 的 内 积 , 诸 公式 
就 不 需要 改变 . 为 了 确定 起 见 , 我 们 详细 写 出 二 维 的 公式 . 

一 个 在 原点 上 没有 原子 的 测度 是 标准 的 , 如 果 它 对 有 限 区 间 赋 以 有 限 质量 , 1/ 
(1L+ 到 十 三 ) 关于 它 是 可 积 的 , 并 且 它 在 原点 上 没有 原子 . 在 一 维 中 选取 一 个 适当 
的 中 心 函 数 , 例如 r(z) = sinz 或 (7.5) 中 所 确定 的 函数 . 令 


enters) 一 1 一 iir(zi) 一 ior(za) 


村 二 Midz}, (11.1) 


vac)= / 


积分 区 域 是 整个 平面 , 那么 w = ev 是 一 个 无 穷 可 分 的 二 元 特征 函数 . 最 一 般 的 无 
穷 可 分 特征 函数 可 通过 乘 以 一 个 正 态 特征 函数 而 得 到 . 
在 极 坐标 中 的 重新 叙述 使 情况 更 为 直观 . 令 
GQ=pcosyp, C=psing, T=rcos0, Y=r7sing. (11.2) 
在 极 坐标 中 的 标准 测度 可 以 定义 如 下 . 对 于 每 个 满足 -x < 9 < 7 的 9, 选取 一 
个 集中 于 莒 00 上 的 一 维 标准 测度 4e. 更 进一步 在 -x < 9 < (圆周 ) 上 选取 一 个 


有 限 测度 W. 那么 M 可 以 通过 把 参数 9 随机 化 来 定义 , 并且 (把 中 心 常数 稍 作 改 
变 ) 可 以 把 (11.1) 改写 成 形式 


yb1, 62) = 广 Ttag} . 广 eipreos(9-9) — 1 ipr(r) on(p —0) jo{ar}. (11.3) 


Tr 


(这 种 形式 使 我 们 能 够 通过 把 原点 上 的 原子 加 到 he。 中 去 ， 而 把 正 态 分 量 吸 收 
进来 ) 

例 稳定 分 布 . 类 似 于 一 维 , 我 们 令 ho{dr} = ” “++. 我 们 可 以 加 上 一 个 任意 的 因 
子 Ce, 但 这 只 改变 测度 环 . 正如 我 们 在 17.3 节 例 (g) 中 所 看 到 的 那样 ， 利 用 这 个 
测度 ，(11.3) 旺 形 式 


v2) = -Co 三 loste -OP (ft 要) wtagj， (1 


17.12 习题 533 


其 中 当 9 一 4 > 0 时 取 上 面 的 符号 , 当 2 一 9 < 0 时 为 取 下 面 的 符号 . 这 说 明 ev 是 
一 个 严格 稳定 的 特征 函数 . 和 17.5 节 中 一 样 , 我 们 可 以 看 出 不 存在 其 他 的 严格 稳 
定 特征 函数 . 但 是 , 正如 一 维 情形 那样 ,指数 a = 1 导致 的 特征 函数 只 是 广义 平稳 
的 , 并 且 在 指数 中 有 一 个 对 数 项 . 

当 Q=1 而 W 是 均匀 分 布 时 , 我 们 得 到 R2? 中 对 称 柯 西 分 布 的 特征 函数 e-“p[ 见 
15.7 节 例 (e) 和 习题 21~ 习题 23]. 


17.12 习 题 
1 在 172 节 中 和 证明, 如果 世 是 一 个 无 穷 可 分 特征 画 数 的 对 数 ,那么 
, 
wt0- 恋 人 VE- ds=x(O) (42 


是 一 个 特征 函数 的 实 倍数 ， 证 明 其 逆 ， 假设 多 是 这 样 一 个 连续 函数 ， 使 得 对 于 每 个 
h > 0X(6)/X(0) 是 一 个 特征 函数 ， 那 么 y 与 一 个 无 穷 可 分 特征 函数 的 对 数 只 相 益 
一 个 线性 函数 ， 此 外 几 是 这 样 的 一 个 对 数 ， 如 果 它 满足 进一步 的 条 件 W(0) = 0 和 
vv(-6) = VC 

[展示 ， 证 明 齐 次 方程 (其 中 x = 0) 的 解 是 线性 的 . ] 
2. 证 明 , 如 果 在 (12.1) 或 (2.13) 中 把 均匀 分 布 换 成 集中 于 点 上 的 分 布 ， 


vO) = BC+ + we — A = x(0), (122) 


那么 习题 1 和 17.2 节 的 论证 仍然 成 立 . 然而 , 由 于 对 应 于 x 的 密度 不 是 严格 正 的 ,所 
以 可 能 要 稍微 复杂 一 点 . 
3. 推广 . 设 及 是 任意 一 个 具有 有 限 方差 的 偶 概率 分 布 ， 如果 ev 是 一 个 无 穷 可 分 特征 函 
数 , 并 且 
X= Ry, (12.3) 
那么 x(6)/x(0) 是 一 个 特征 函数 . 若 利用 (12.3) 来 代替 (2.13), 则 17.2 节 的 论证 仍然 
成 立 . 
特别 , 如果 及 有 密度 Bo" 那么 我 们 直接 导致 的 辛 钦 正 态 形 式 . ( 见 17.2 节 
最 后 的 注 . ) 但 是 ,对 多 是 无 界 这 个 事实 需要 小 心 . 
4 如果 凯 是 一 个 无 穷 可 分 特征 函数 , 那么 存在 常数 a 和 5, 使 得 对 于 所 有 的 《,|inw(6)| < 
@+ bc?. 
5. 真空管 中 的 散 粒 唆 声 .我 们 在 6.3 节 例 (b) 中 考虑 过 一 个 三 角形 阵列 , 其 中 Xi,n 具有 
特征 函数 
Pk.n(C) = 1+ ahle "0H) —1], 
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10. 


11. 


12. 


13. 


此 处 有 =n-1/2. 证 明 : Sn = Xi.n +.… 十 Xn,n 的 特征 函数 趋 于 e*， 其 中 
a ”icre) 
vO =a [ee® -nae 


e 是 一 个 随机 变量 X(t) 的 特征 函数 , 通过 微分 我 们 可 得 到 6.3 节 (3.4) 康 贝尔 定理 . 


. 设 U= EXn/n, 其 中 Xk 是 禾 闻 的 ee 3" 证 明 9: U 是 无 穷 可 分 


的 , 具有 标准 测度 M{dz} = zli 一 ci， 叭 了 需要 求 一 个 几何 级 数 之 和 外 ,不 需要 
进行 计算 . ] 


. 设 P(s) = 5p。st， 其 中 pk > 0, 3p = 1. 假设 P(0) > 0,In 了 人 9 是 一 个 系数 全 为 正 的 


P(0) 
每 级 数 . 如 果 w 是 任意 一 个 分 布 FF 的 特征 函数 , 证 明 : P(y) 是 无 穷 可 分 特征 函数 . 利 
用 F"* 表示 它 的 标准 测度 M. 


有 起 的 特殊 情形 ， 如果 0< a <b< 1, 那么 |. 二 是 无 穷 可 分 特征 函数 
(见习 题 19.) 


. 续 . 利用 P 是 一 个 无 穷 可 分 整 值 随机 变量 的 母 函 数 这 个 事实 ,借助 于 随机 化 和 从 属 过 


程 来 解释 P(p). 


, 设 X 是 稳定 的 , 具有 特征 函数 e-1 人 "(0 < a < 2), 设 Y 与 X 独立 . 如 果 Y 是 正 的 ， 


具有 集中 于 0,06 上 的 分 布 G, 证 明 : XY™® 的 特征 函数 为 
ellvG{ay). 
o 


证 明 : 如 果 区 和 了 是 具有 指数 和 的 独立 严格 稳定 分 布 ,并 且 Y >0, 那么 XYY/® 

是 严格 稳定 的 ， 具 有 指数 aB. 

设 w 是 这 样 一 个 特征 函数 , 使 得 w2(C) = w(ak) 和 we(5) = w(bk). 那么 w 是 稳定 的 . 
[17.3 节 例 (f) 表明 , 第 一 个 关系 式 是 不 够 的 . 指数 2, 3 可 以 换 成 任意 两 个 互 质 的 

整数 . ] 

证 明 , 8.8 节 的 简单 引 理 3 不 仅 适用 于 单调 函数 , 而且 适 用 于 特征 函数 的 对 数 . 证 明 ， 

如 果 对 于 所 有 的 n,wn(C) = w(anC), 那么 对 于 5 > 0,inw(5) = 46", 其 中 4 是 一 个 复 

常数 . 

( 续 ). 利用 8.10 节 习题 28 的 结果 直接 证 明 ， 如 果 w 是 一 个 稳定 特征 函数 ， 那 么 对 于 

5 > 0, 或 者 mw(5) = 46" 十 这 ,或 者 mw(5) = 46+ikm6, 其 中 "是 一 个 实数 . 

设 忆 集中 于 5 上 , 且 1 一 F(z) = z- "ZL(z), 其 中 0 < a < 1,L 在 无 穷 远 处 是 缓慢 

变化 的 . 证 明 , 当 《5 一 0+ 时 ,1 一 2(6) ~ AC*L(1/0). 


@ 特征 函数 w 被 一 个 无 穷 乘积 所 确定 ,此 无 穷 乘积 正巧 是 众所周知 的 2x|(|/enll -er-xilkl 的 典 理科 


积 . 
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14. 续 . 由 17.5 节 的 结果 证 明 其 逆 , 以 及 4 = T(1 -aeje-ee/2. 


. 续 . 对 大 利用 归纳 法 证 明 : 当 z 一 oo 时 1 一 F(z) ~ ar“L(z)( 其 中 工 是 缓慢 变化 的 ， 
且 上 <a< 大 十 1), 当 上 且 仅 当 《 一 0+ 时 ， 


(iC) ki) ar (1 
AGO-L- 生 6 2 -scr 人， (*) 


只 


工 
那么 自然 有 4 = -aT(k 一 a)e-'#"o. 
16. 把 三 角形 阵列 的 弱 定律 明确 表述 成 为 17.7 节 一 般 定理 的 一 个 特殊 情形 . 


17. 设 {Xk,n} 是 一 个 零 阵列 , 它 的 行 和 的 极限 分 布 是 由 标准 测度 M 确定 的 . 证 明 , 对 于 
z>0, 
P{max[Xin,:*, Xrnn] < zj 一 e+ 人 


令 述 其 道 . 


18. 设 {Xen} 是 一 个 对 称 变量 的 零 阵列 , 它 的 行 和 的 极限 分 布 是 由 在 原点 上 具有 质量 o? 
的 标准 测度 M 确定 的 . 证 明 : 5S# = ZXRE，。- c2 的 分 布 收敛 于 这 样 一 个 分 布 ， 此 分 布 
由 在 原点 上 没有 原子 的 测度 M# 确定 , 且 使 得 对 于 z > 0, M#(z) = 2M+(Vz). 


19. 设 0<ri < 1 Dri < co. 对 于 任意 的 实数 ,无穷 乘积 


2 A 


l—neioc¢ 1—r2eio2¢ 


收敛 ， 并 且 表 示 一 个 无 穷 可 分 特征 函数 ， (提示 ;根据 习题 7， 每 个 因子 是 无 穷 可 
分 的 . ) 


20. 利用 17.9 节 例 (d) 的 方法 构造 这 样 一 个 分 布 FE， 使 得 在 所 有 的 点 上 limsup F"* 
(z) = 1, liminf PF"*(z) = 0. 


21. 在 (11.4) 中 , 设 W 表示 均匀 分 布 ， 那 么 
(Gu 62) = —clC? + 4H]?0, 
并 且 ey 是 一 个 对 称 的 稳定 分 布 . 


22. 在 G1.4) 中 , 设 久 赋 于 4 个 点 0,m 革 , 一 3 的 质量 都 是 ,那么 (11.4) 表示 2 个 一 
维 独 立 稳定 变量 的 二 元 特征 函数 . 


23. 在 (11.4) 中 , 设 W 集中 于 两 点 c 和 十 x 上 , 那么 (11.4) 表示 一 对 满足 
Xising — X2coso =0 


的 变量 的 退化 特征 函数 . 更 一 般 地 说 , 任 一 离散 的 W 都 导致 退化 分 布 的 卷 积 . 利用 极 
限 过 程 解 释 (11.4). 
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在 很 大 程度 上 , 本 章 讨论 已 在 第 12 章 中 讨论 过 的 课题 , 因此 我 们 把 应 用 保持 
在 最 小 限度 内 . 为 了 使 本 章 自给 自足 并 把 预备 知识 控制 在 最 小 限度 之 内 (除了 第 15 
章 的 傅 里 叶 分 析 外 )， 我 们 做 了 很 大 的 努力 . 这 个 理论 和 上 两 章 完全 独立 . 18.6 节 与 
前 面 各 节 无 关 . 


18.1 基本 恒等式 


本 章 中 X1, X2,… 是 具有 共同 分 布 F 和 特征 函数 p 的 独立 随机 变量 . 我 们 昭 
例 令 50 = 0, 5n = Xi 十 … 十 Xn, 序列 {5n} 构成 一 个 由 下 产生 的 随机 游 动 . 

设 4 是 直线 上 的 任 一 集合 ,4' 是 它 的 余 集 (在 大 多 数 应 用 中 ,4' 将 是 一 个 有 
限 或 无 限 的 区 间 .) 如 果 了 是 4 的 子 集 (区 间 ), 并 且 


Si €h,...,Sn-1€ A,Sn €I(I CC A’'), (1.1) 


那么 我 们 说 随机 游 动 在 时 刻 m (首次 ) 进入 A', 进入 点 位 于 了 内 .因为 随机 游 动 在 所 
有 时 刻 上 可 能 不 进入 A', 所 以 进入 时 刻 是 一 个 可 能 为 亏损 的 随机 变量 ,这 对 首 
次 进入 点 SN 也 正确 . 对 于 对 偶 (N, Sw) 的 联合 分 布 , 我 们 记 


P{N=n, Sw €1} = Hn{T)}, n=1,2,.….. (1.2) 


于 是 Hn{ 了 ) 是 事件 (1.1) 的 概率 , 但 是 分 布 (1.2) 是 通过 下 列 约定 对 直线 上 所 有 集 
合 工 都 有 定义 : 如 果 工 < A, 那么 Hn{I} = 0. 概率 (1.2) 称 为 命中 概率 . 对 它们 的 
研究 与 对 首次 进入 4' 以 前 的 随机 游 动 ( 即 局 限于 4 上 的 随机 游 动 ) 的 研究 有 密切 
关系 . 对 于 ICA 和 n=1,2,…, 令 


G{I =P{S € A,.…, Sn_1 € A, Sn €1), (1.3) 


用 文字 来 说 就 是 , 这 是 在 时 刻 n 随机 游 动 逗留 于 集合 Tc 4 且 直 至 时 刻 n 不 进入 
4' 的 概率 . 如 果 当 了 C 4' 时 , 令 Gn{T} = 0, 我 们 可 以 把 这 个 定义 推广 到 直线 上 的 
所 有 集合 


Gn{A} =1-P{N <n}. (1.4) 
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变量 N 不 是 亏损 的 , 当 且 仅 当 n 一 oo 时 , 这 个 量 趋 于 0. 
考虑 随机 游 动 在 时 刻 n = 1,2,… 的 位 置 5。, 显然 , 对 于 了 C 4， 


nD = [Gray Py), (1.58) 


而 对 IC 4， 
Gan{D}= 人 cufdyjPO -中 (1.5b) 


我 们 现在 约定 ， 令 Go 表示 集中 于 原点 上 的 概率 分 布 。 那么 关系 式 (1.5) 对 n= 
0,1,2,… 成 立 , 并且 递 推 地 确定 所 有 的 概率 瓦 。 和 G,. 两 个 关系 式 可 以 结合 成 一 
个 . 给 定 直线 上 的 任 一 集合 , 我 们 把 它 分 成 分 量 74' 和 TA, 并 把 (1.5) 应 用 于 这 些 
分 其 . 我 们 知道 ，。 和 G, 分 别 集中 于 A' 和 A 上 ,所 以 对 n 二 0,1,… 和 任意 的 
1, 我们 有 

Hard{D + Gun{D} = [Gr{ay PU -yy). (1.6) 


12.3 节 曾 讨论 了 4 = 00 的 特殊 情形 , 12.3 节 (3.5) 关系 式 和 现在 的 (1.5) 相 
同 . 我 们 可 以 按照 原来 的 方法 推导 一 个 类 似 于 12.3 节 (3.9) 的 维 纳 - 霍 普 夫 型 积分 
方程 , 此 方程 仍 只 有 一 个 概率 上 可 能 的 解 (虽然 唯一 性 不 是 绝对 的 ). 但 是 这 次 最 好 
依赖 傅 里 叶 分 析 这 个 强 有 力 的 方法 . 

我 们 要 讨论 对 偶 (N, Sw) 的 分 布 . 因为 N 是 取 整 值 的， 所 以 我 们 可 以 利用 NN 
的 母 函数 和 Sw 的 特征 函数 . 因此 , 我 们 令 


X(s,6) = "fe es Hn {dz}, 


n=1 

7(s,6) = > /eontey (1.7) 
(两 个 级 数 的 零 次 项 分 别 等 于 0 和 1.) 这 些 级 数 至 少 对 |s| < 1 收敛, 但 是 通常 在 更 
大 的 区 间 内 收敛 . 

为 了 清晰 起 见 ， 我 们 给 出 了 实际 积分 域 ,但 是 可 以 给 出 像 -oo 和 +oo 一 样 

的 积分 限 . 特别 地 ，(1.6) 中 的 积分 是 普通 的 卷 积 .因此 ， 作 全 里 叶 - 斯 蒂 尔 切 斯 
(Fourier- Stiltjes) 变换 , 关系 式 (1.6) 就 呈 形 式 

Xn+1(C) + vn+1(6) = vn(O) PO). (1.8) 
用 s"t! 乘 以 上 式 , 并 对 n = 0,1,… 求 和 , 我 们 得 到 ,对 于 使 (1.7) 中 级 数 收 敛 的 
所 有 s, 有 

X(s,6) +v(s,C6) —1= sv(C)p(O). 
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因此 , 我 们 证 实 了 基本 恒等式 ， 
1—x= vl — yl. (1.9) 


(关于 另外 一 种 证 法 见习 题 6.) 
从 原则 上 讲 , x 和 都 可 以 由 (1.5) 递 推 地 计算 出 来 , 恒等式 (1.9) 乍 一 看 来 是 

多 余 的 . 实际 上 直接 计算 几乎 是 行 不 通 的 ,但 是 可 以 从 (1.9) 直接 得 到 许多 有 价值 

的 信息 . 

例 设 三 表示 密度 为 3e-F, 特 征 函数 为 P(() = 1/(1+ 6?) 的 双 侧 指数 分 布 ,并 


设 4= -aa .对 z>a, 我 们 由 (1.5a) 得 到 
机 Hi 人 本 55] = 有 Hi 可 一 3 / “Ga{dy}e- 
一 cne 一 ， (1.10) 


其 中 cn 与 z 无 关 . 由 此 推出 首次 进入 |z| > a 的 点 Sw 与 这 次 进入 的 时 刻 独立 , 并 
且 有 一 个 与 eel( 对 |z| > a) 成 比例 的 密度 . 这 个 结果 在 直观 上 是 与 第 1 章 所 述 的 
指数 分 布 的 无 记忆 性 一 致 . 独立 性 就 是 说 联合 特征 函数 x 一 定 可 以 进行 因子 分 解 ， 
我 们 从 Sw 的 密度 的 形式 可 以 看 出 ， 


a 
X(s, 6) = 3P(s) Te + |; (1.11) 


Sn |z| > a 的 时 刻 NN 的 母 函 数 . [比例 因子 可 由 x(1,0) = 1 这 个 事 
P(s) 的 直接 计算 是 很 麻烦 的 , 但 是 容易 从 (1.9) 导出 一 个 明显 表达 式 . 事实 上 ， 


利用 我 们 的 特征 函数 的 形式 ，(1.9) 的 右边 当 ¢ = tiV1 一 s 时 等 于 0， 从 而 对 于 这 
个 值 , x(s,《) 必须 化 为 1. 因此 


ey ey pp Cid 


由 此 推出 首次 进入 |z| > a 的 时 刻 N 的 期 望 为 1 +a 二 a?. 
(关于 进一步 的 例子 , 见习 题 1~ 习题 5 > 


rw-2| es EA | 


*18.2 ”有 限 区 间 , 瓦尔 德 逼近 


定理 设 4==@G 是 一 个 包含 原点 的 有 限 区 间 ， 并 设 (N, SN) 是 余 集 4' 的 到 达 


* 之 所 以 编 入 本 节 是 由 于 它 在 统计 学 中 的 重要 性 , 初学 者 可 略 去 . 
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变量 N 和 SN 是 正常 的 . 母 画 数 
六 s"P{N >n}= pb» s"Gn{A} (2.1) 
n=0 n=0 
对 革 一 s > 1 收敛 ， 从 而 N 的 各 阶 短 部 存在 . 到 达 点 SN 的 期 望 有 限 ， 当 且 仅 当 
随机 游 动 的 分 布 局 的 期 望 J 存在 ,在 这 种 情形 下 ， 
E(SN) = 1: E(N). (2.2) 
A. 瓦尔 德 首先 讨论 了 恒等式 (2.2). 在 4 =0,o06 的 特殊 情形 下 , 它 化 为 12.2 节 
(2.8). 
证 正如 已 经 指出 的 那样 , Gn{4} 和 P{N > n} 是 随机 游 动 持续 n 步 以 上 的 概率 
的 不 同 表达 式 , 从 而 (2.1) 的 两 边 是 恒 等 的 . 
选取 这 样 的 整数 7, 使 得 P{lS-| < a+ 喘 =9<1. 事件 {N >n+"} 不 可 能 发 
生 , 除非 
N>n,|Xnt1it+:**+ Xntr| <a+b. 
这 两 个 事件 是 独立 的 , 因为 {N > n} 只 依赖 于 变量 Xi,… ,Xn. 因为 X41 十 … 十 
Xntr 与 S+ 有 相同 的 分 布 , 所 以 我 们 知道 
P{N >n+r} < P{N >n}n. 
从 而 利用 归纳 法 得 
P{N > kr} < 中. (2.3) 
此 式 说 明 序列 P{N > n} 至 少 像 有 公 比 ma/ 的 几何 级 数 那样 快 地 减少 . 由 此 推出 
和 是 一 个 正常 变量 ，(2.1) 中 的 级 数 至 少 对 于 |s| <.7-1/7 收敛 . 这 就 证 明了 第 1 个 
断言 . 
还 可 推出 (1.9) 对 |s| < 7-1" 是 有 意义 的 . 对 于 s = 1, 我 们 得 到 


1—x(1,6=v(1, Of — ¢(O)). (2.4) 


但 是 , x(1,6) 是 Sw 的 特征 函数 , x(1,0) = 1 这 个 事实 说 明 Sw 是 正常 的 

事件 |Sw| > 上 +a 十) 不 可 能 发 生 ， 除 非 对 于 某 个 我 位 有 N > ?一 1 和 
|Xn| > 正如 已 经 说 过 的 那样 , 这 2 个 事件 是 独立 的 , 因为 X 是 同 分 布 的 , 所 以 
我 们 得 到 


P{lSy| >t+a+b} < Prey>n- 1}:P{IX1| > 如 


= EN). P{|X1| > 如 . 
@ ”这 就 是 统计 学 家 所 热 知 的 斯 坦 (C. Stein) 引 理 . 关于 另外 一 种 证 明 , 见习 题 8 
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为 使 期 望 y = E(Xa) 存在 , 当 且 仅 当 右边 在 06 上 是 可 积 的 . 在 这 种 情形 下 , 这 对 
左边 也 是 正确 的 , 于 是 E(SN) 存在 . 另 一 方面 ， 


P{lSn| >t} > P{IX1| > t+a+b}, 


因为 右边 事件 的 发 生 蕴含 Sw = Xi. 因此 , E(Sw) 的 存在 性 蕴含 = E(Xi) 的 存在 

性 . 当 这 些 期 望 存在 时 , 我 们 可 以 微分 (2.4) 以 得 到 

Ox(0, 1) 
8 


我 们 现在 来 推导 瓦尔 德 恒等式 , 它 是 基本 恒等式 (1.9) 的 一 个 变形 . 为 了 避免 
使 用 虚 自 变量 , 我 们 令 


所 (Sw) = 


= p'(0)v(1,0) = inE(N). > (2.5) 


f(N)= / ex=Ffdz}. (2.6) 


假设 这 个 积分 在 包含 原点 的 某 个 区 间 一 Ao。 < 和 < Xi 内 收敛 . 于 是 特征 函数 为 
9(iA) = f(A), 这 个 函数 在 给 定 的 区 间 中 的 每 个 和 的 一 个 复 邻 域 上 是 解析 的 . 瓦尔 
德 恒等式 在 形式 上 可 通过 在 (1.9) 中 令 4 = 认 和 s = 1/p(iA) 得 到 . 对 于 这 些 特殊 
值 , 右边 等 于 0, 从 而 Xx(s,) = 1. 由 x 的 定义 , 这 个 关系 式 可 以 用 概率 论 的 术语 
重新 叙述 如 下 . 
瓦尔 德 引 理 了 如 果 积分 (2.6) 对 于 -Xo < 入 < Xi 收敛 ,那么 在 这 个 区 间 上 ， 


E(f-N(A)e-xsw) = 1. (2.7) 


证 ”我们 重复 导致 (1.9) 的 论证 . 因为 测度 Gn 集中 于 有 限 区 间 上 ,所 以 它们 的 傅 
里 叶 变 换 xn 对 复 平面 上 的 所 有 都 收敛. 根据 假设 pli) = J(A) 存在 ， 从 而 可 见 
(1.6) 的 傅 里 叶 形式 (1.8) 对 5 = 认 成 立 . 乘 以 f-"-1( 和 A), 这 个 关系 式 就 呈 形 式 


”1(A)XnH(iN) = FA) nN) = f° A) (iA). (2.8) 


如 果 f-"(A)vn(iA) 一 0, 那么 因明 显 地 消去 一 些 项 而 使 右边 相 加 得 1. 在 这 种 情形 
下 , 把 (2.8) 对 n 求 和 就 可 导致 断言 (2.7), 从 而 只 要 证 明 


ff "(NGn{A}—= 0 (2.9) 


@ 瓦尔 德 在 序 贯 分 析 中 利用 了 (2.7). 这 是 在 1945 年 之 前 , 也 是 在 一 般 随机 游 动 被 系统 研究 之 前 ， 因 
此 很 自然 , 它 的 条 件 比 较 强 , 他 的 方法 比较 难 , 但 是 很 遗 钴 它们 影响 了 统计 学 文献 . 本 书 的 论证 用 了 
米 勒 (H. D. Miller)(1961) 的 想法 . 
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就 行 了 . 如 果 f(n) < co, 那么 


b 
Gn{A} < P{-a < Sw < b} < e+t5)Inl / epn*{dz} 


eetaml gn(m). 


因此 , 如 果 f(A) > f(m), 那么 (2.9) 成 立 . 因为 我 们 可 以 自由 地 选取 m, 所 以 我 
们 就 对 除 使 f 取 最 小 值 以 外 的 一 切 和 证 明了 (2.7). 但 是 因为 f 是 是 函 数 , 所 以 f 
至 多 有 一 个 最 小 值 . 在 这 个 点 上 , (2.7) 可 由 连续 性 推出 . p> 
例 关于 N 的 估计 .瓦尔 德 在 研究 序 贯 分 析 中 的 问题 时 得 到 了 他 的 引 理 , 在 序 贯 分 
析 中 需要 求 出 首次 离开 4 的 时 刻 N 的 分 布 的 逼近 以 及 这 个 离开 发 生 于 这 个 区 间 
的 右 端 或 左 端的 概率 的 估计 . 瓦尔 德 的 方法 是 第 1 卷 14.8 节 中 对 具有 有 限 多 个 跳 
唉 的 算术 分 布 所 述 的 办 法 的 推广 .( 在 那里 还 说 明 怎 样 获 得 严格 不 等 式 .) 令 


px =P{N=k,SN >0b}, ge =P{N=k, Sy < ~a)}, (2.10) 


用 P(s) 和 Q(s) 表示 相应 的 母 函 数 .( 于 是 P+Q 是 NN 的 母 函 数 .) 现在 假设 与 下 的 
期 望 和 方差 相 比 a 和 b 比较 大 . 于 是 到 达 点 Sw 可 能 比较 接近 于 b 或 -a. 如 果 这 
两 个 数 是 Sw 的 仅 有 可 能 的 值 , 那么 恒等式 (2.7) 呈 形 式 


P(1/fN))e +Q(1/fN))eY =1. (2.11) 


我 们 自然 希望 在 上 述 假设 下 (2.11) 至 少 近似 地 被 满足 . 函数 f 是 凸 的 , 通常 可 以 找 
到 这 样 的 区 间 so < sl < s1, 使 得 在 其 中 方程 


sf(N)=1 (2.12) 


有 2 个 连续 地 依赖 于 s 的 根 入 (s) 和 和 2(s). 代入 (2.11), 我 们 得 到 母 函数 已 和 @@ 的 
两 个 线性 方程 , 因此 我 们 得 到 (至 少 近 似 地 )N 的 分 布 和 离开 右 端 或 左 端的 概率 . > 
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在 本 节 中 我 们 用 纯 分 析 方 法 推导 基本 恒等式 (1.9) 的 各 种 各 样 的 推论 . 可 以 证 
明 它们 包含 第 12 章 用 组 合 方法 推导 的 许多 结果 , 而 且 现 在 的 形式 更 灵活 , 更 深刻 . 
这 可 能 产生 这 样 一 个 错觉 , 即 傅 里 时 方法 比较 优越 , 但 实际 上 是 这 两 种 方法 的 相互 
影响 推动 了 理论 的 近代 发 展 .每 种 方法 都 可 导致 用 另 一 种 方法 似乎 不 可 能 得 到 的 
结果 .( 关 于 说 明 性 例子 见 18.5 节 , 正 部 分 和 数 的 反正 弦 定 律 以 及 整个 理论 向 可 交换 
变 基 的 推广 说 明了 组 合 方法 的 优点 .) 
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今后 NN 和 Sw 表示 首次 进入 开 的 半 直 线 0,00 的 时 刻 和 点 . 它们 的 联合 分 布 
P{N=n,Sn €1} = Hn,{1} 
为 
Hn{T} =P{S1 < 0,.…, Sn-1 < 0, Sn € 1D},1 C 0,o00. (3.1) 
这 里 我 们 认为 ，Ho = 0, Hn 集中 于 0,05 上 . 代替 二 元 特征 函数 , 跟 以 前 一 样 , 我们 
引入 母 函 数 和 特征 函数 的 组 合 
Xx(s,C) = E(sNeics»), (3.2) 
即 村 
x(s,6) -2" / ez Hn {dr}. (3.3) 
(积分 是 在 开 半 轴 上 进行 的 , 但 是 如 果 把 下 限 换 为 -oo, 那么 什么 也 不 变 .) 为 了 简 
明 起 见 , 我 们 称 x 为 测度 H, 的 序列 的 “变换 ”. 
我 们 用 N- 和 Sw 一 表示 首次 进入 开 负 半 轴 的 时 刻 和 点 , 于 是 {Hi} 和 x- 表 
示 相 应 的 分 布 和 变换 . 


当 基 本 分 布 已 不 连续 时 , 我 们 必须 区 别 首次 进入 开 半 轴 和 首次 进入 闭 半 轴 . 
此 , 需要 考虑 经 过 负 值 返回 原点 这 个 事件 . 它 的 概率 分 布 {fn} 为 


fn=P{S1 <0,.…,Sn-1 <0,5n =0},n>1. (3.4) 
我 们 令 f(s) = fe". 立即 可 见 ， 如果 把 所 有 的 不 等 式 反 向 ,那么 (3.4) 的 右边 
仍然 不 变 . 显然 , 半 fn < P{Xi < 0} <1. 


利用 这 些 记 号 , 我 们 现在 可 阐述 基本 的 
维 纳 - 霍 普 夫 因 子 分 解 定 理 ”对 于 |s| < 1, 有 恒等式 


1— sp(6) =[1— f(s)]:[ —x(s, Ol — x (s,O)]. (3.5) 


证 明 将 导致 和 X 的 明显 表达 式 , 我 们 以 引 理 的 形式 来 叙述 这 2 个 表达 式 .9 
引 理 1 ”对 于 0<s<1， 


1 a /er 
na- he pn {dz}. (3.6) 


n=1 


@ 对 5=0, 引 理 1 化 为 12.7 节 的 定理 1. 推广 了 的 12.9 节 (9.3) 形式 等 价 于 引 理 1, 但 是 比较 繁 
拙 . 引 理 2 重新 叙述 了 12.9 节 (9.6). 它 应 归功 于 G. Baxter. F. Spitzer, Trans, Amer, Math. 
Soc., Vol. 94(1960) pp. 150-169 给 出 了 一 个 大 大 简化 了 (但 仍 比较 困难 ) 的 证 明 . 
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X- 的 类 似 公式 可 由 对 称 性 推出 . 
引 理 2 对 于 0<s<1, 


和 sn 
hi) = > 元 PfSn =0}. (3.7) 


因为 右边 没有 不 等 式 ， 所 以 如 果 把 所 有 的 不 等 式 都 反 向 ，(3.4) 仍然 成 立 ， 在 
12.2 节 例 (a) 中 作为 对 偶 原 理 的 一 个 推论 导出 过 这 个 结果 . 

因子 分 解 (3.5) 的 显著 特点 是 ， 它 利用 2 个 集中 于 两 个 半 轴 上 的 (可 能 为 亏损 
的 ) 分 布 来 表示 任意 一 个 特征 函数 p. 引 理 1 表明 这 种 分 解 是 唯一 的 . 

对 连续 分 布 来 说 证 明 是 简单 明了 的 , 但 是 对 于 一 般 情形 , 我 们 需要 用 到 关于 进 
入 闭 区 间 ee 的 概率 的 类 似 于 引 理 1 的 结果 . 我 们 将 用 Rn{7} 表示 这 些 概率 ， 即 
对 于 0,c6 上 的 任 一 区 间 二， 


Rn{I} = P{S <0,.…,Sn-1 <0,Sn € IT). (3.8) 
当然 Ro = 0, Rn{=00,0} =0. 
引 理 3 对 于 0<s<1, {Rn} 的 变换 p 为 
hoi = 之 和 / 有 ois pnk {dz}. (3.9) 
证 ”我们 从 把 基本 恒等式 (1.9) 应 用 于 4 = 0 se 开始 . 按照 我 们 记号 ,进入 概率 
是 忆 , 而 不 是 Hn, 从 而 (1.9) 可 写作 
L— pls,¢) =7(s, {1 — sp(O)]. (3.10) 
此 处 是 在 一 06,0 上 由 
Gn{I} =P{S1 <0,.., Sn_1 < 0,Sn < 0,5n € I} (3.11) 
定义 的 概率 Gn 的 序列 的 变换 ， 即 


HO) -1= Ye / "ocrG, {dz}. (3.12) 
n=1l J-% 


对 于 固定 的 |s| < 1, 函数 1 一 sp(4) 和 1 一 X(s,5) 不 可 能 有 和 零点 , 从 而 ( 见 17.1 
节 ) 它们 的 对 数 可 以 唯一 地 定义 为 《 的 在 原点 上 等 于 0 的 连续 函数 . 因此 , 我 们 可 
以 把 (3.10) 改写 成 形式 


1 1 
ns) = Pip + Ys:6), (3.13) 
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或 者 
Co on ft a 
宇 二 大 ost = FG,0) 


+ CY pd -村 (3.14) 
n=1 


n 


对 于 一 个 固定 值 0 < s < 1, 考虑 这 个 关系 式 . 于 是 p"(s,6) 是 一 个 集中 于 b,c6 上 的 
亏损 概率 分 布 的 特征 函数 ， 从 而 右边 第 一 个 级 数 是 一 个 集中 于 ,co 上 的 有 限 测度 
的 健 里 叶 -斯 蒂 尔 切 斯 变换 . 类 似 地 , (3.12) 表明 p(s,0) -1 是 一 个 集中 于 =o0,0 上 
的 有 限 测 度 的 傅 里 叶 -斯 蒂 尔 切 斯 变换 . 因此 , [p(s,C) 一 1]" 也 是 一 个 集中 于 一 00,0 
上 的 有 限 测度 的 传 里 时 - 斯 蒂 尔 切 斯 变换 ， 从 而 最 后 一 个 级 数 是 =50,0 上 2 个 测 
度 之 差 的 变换 . 由 此 推出 ,当局 限于 co 上 的 集合 时 ，(3.14) 中 的 前 2 个 级 数 表示 
同一 个 有 限 测度 ， 即 并 (s"/m) F"*. 断言 (3.9) 利用 相应 的 变换 重新 叙述 了 这 个 事 
实 . p> 
引 理 2 的 证 明 ”这 个 引 理 已 包含 在 引 理 3 中 , 因此 (3.7) 的 两 边 是 两 个 测度 在 原点 
上 的 原子 的 质量 , 这 两 个 测度 的 变换 出 现在 (3.9) 中 . 这 对 右边 显然 是 正确 的 . 至 于 
左边 ,根据 定义 (3.8)，R 在 原点 上 的 原子 的 质量 为 f. 于 是 f(s) 是 变换 为 p(s,¢) 
的 测度 攻 s"Rn 赋予 原点 的 质量 . 因此 ,变换 为 并 pn(s,)/n 的 测度 对 原点 赋 子 质 
基本 1"(8)/n=In(1 f(s)-1. 
引 理 1 的 证 明 ”我 们 用 2 种 方法 证 明 . 

(0) 引 理 1 是 引 理 3 对 于 开 半 轴 的 类 似 结果 ， 完 全 可 用 同样 的 证 明 . 如 果 把 这 
两 个 引 理 看 作 是 已 知 的 ,那么 我 们 从 (3.9) 中 减 去 (3.6) 可 以 得 到 


p(s,6) = f(s) + [1 — f(s)]x(s, C). (3.15) 


[这 个 恒等式 说 明 , “首次 进入 0,00” 可 以 是 “一 次 经 过 负 值 而 返回 原点 ", 并 且 当 这 
样 的 返回 不 发 生 时 ， 首 次 进入 Dee 的 点 的 (条 件 ) 分 布 化 为 首次 进入 耐 55 的 分 布 
{Hn}] 

(区 另外 , 我 们 可 以 从 HH, 和 RR 的 定义 (3.1) 和 (3.8) 直接 证 明 (3.15).[ 为 此 ， 
只 需 在 (3.8) 中 考虑 使 Sk = 0 的 最 后 一 个 指标 上 和 n, 并 把 (k,0) 取 作 新 原点 .| 把 
(3.15) 代入 (3.9), 我 们 作为 引 理 2 和 引 理 3 的 推论 而 得 到 引 理 1. p> 
因子 分 解 定理 的 证 明 ”把 引 理 1~ 引 理 2 的 恒等式 与 引 理 1 关于 一 06,0 的 类 似 恒 
等 式 相 加 , 我 们 得 到 以 对 数 形式 表示 的 (3.5). 由 连续 性 可 推出 (3.5) 对 s = 1 也 成 
立 . 
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系 1 
7(s,6) = I (3.16) 
证 由 (3.13) 和 引 理 3 知 ， 

TO=em 全 生 矿 te) 、 (8.17) 
根据 引 理 1, (3.16) 和 (3.17) 的 右边 是 恒 等 的 . > 
例 (a) ”二 项 随机 游 动 . 设 

P{X1=1}=p, P{X1= -1}=4¢. 
首次 进入 两 个 半 轴 必然 发 生 在 士 上 ,从 而 
X(s5) = P(s)e*, x-(s,C) = Q(s)e™, (3.18) 


其 中 已 和 @ 是 首次 进入 时 刻 的 母 函数 . 因此 ， 因 子 分 解 公式 (3.5) 的 两 边 是 3 个 
指数 eX%(k = 0, 士 1) 的 线性 组 合 . 比较 系数 , 我 们 得 到 3 个 方程 : 


-f(D + P(s)Q(s)]=1, 


{1 ~ f(s)]P(s) = sp, (3.19) 
[=f(5)Q(s) = sd 

这 导致 1 - f(s) 的 一 个 二 次 方程 , 条 件 f(0) = 0 歼 含 f 为 
Js) = 3(1 ~ VE p95). (3.20) 


于 是 母 函数 P 和 Q@ 可 从 (3.19) 推出 如 果 p > 9， 那 么 我 们 有 f(1) = g， 从 而 
Q(1) < 1 . 这 样 因子 分 解 定理 直接 导致 首次 通过 时 间 和 循环 时 间 的 分 布 , 这 些 分 布 
在 第 1 卷 第 11 章 和 第 1 卷 第 14 章 中 曾 用 其 他 方法 求 出 过 . 

例 (b) ”有限 算术 分 布 . 如 果 下 集中 于 -a 和 之 间 的 整数 上 , 那么 同样 的 方法 在 
原则 上 可 以 应 用 . 变换 x,x- 和 f 现在 可 用 a 十 b+ 1 个 方程 确定 , 但 显 式 解 却 难以 
获得 [ 见 12.4 节 例 (c)]. 

例 (c) 设 下 A 即 令 


Pp(0) = a>0, b>0. (3.21) 


a ‘5b-i , 


由 于 下 连续 , 所 以 我 们 有 f(s) = 0. 因子 分 解 公式 (3.5) 的 左边 在 C= -- 边 上 有 极点 ， 
但 是 x-(s,5) 在 具有 负 虚 部 的 任 一 点 《〈 旁 是 正则 的 .( 之 所 以 如 此 ,是 因为 x- 是 一 


546 第 18 章 传 里 叶 方 法 在 随机 游 动 中 的 应 用 


个 集中 于 一 oo,0 上 的 测度 的 变换 .) 由 此 推出 , x 一 定 具有 x(s,¢) = (b 一 i¢)-1U(s,¢) 
的 形式 , 其 中 U 对 所 有 的 《是 正则 的 . 因此 , 我 们 推测 U 与 6 无 关 , 即 x 和 x- 具 
有 形式 


xX"0 -2 x 0 = 2 (3.22) 
为 使 上 式 成 立 , 我 们 必须 有 
a _/)_ PN eg 
1 ( A) ( 2 (3:23) 


通 分 并 比较 两 边 系数 ， 我 们 可 得 P(s) = Q(s), 且 P(s) 满足 一 个 二 次 方程 . 条 件 
P(0) = 0 排除 去 两 根 之 一 , 我 们 最 后 求 出 


P) = Q(s) = Bla +6— Va To — dad). (3.24) 


假设 a > b, 那么 P(1) =b, 从 而 P(s)/5 和 Q(s)/a 是 一 个 正常 概率 分 布 和 一 个 
亏损 概率 分 布 的 母 函数 . 因此 ，(3.22) 中 所 确定 的 函数 x 是 这 样 一 个 对 偶 (N, Sw) 
的 变换 , 使 得 Sn 与 N 独立 , 并 且 有 特征 函数 b/(b 一 i). 类 似 的 结果 对 x 成立, 由 
因子 分 解 的 唯一 性 , P(s)/b 和 Q(s)/a 确实 是 首次 进入 时 刻 N 和 N- 的 母 函数 .[ 在 
12.4 节 例 (a) 中 也 求 出 ，Sw 和 Sw 一 服从 指数 分 布 . 回忆 6.9 节 例 (e), 形 如 (3.21) 
的 分 布 在 排队 论 中 起 着 重要 的 作用 .] > 

关于 进一步 的 例子 , 见习 题 9~ 习题 11. 


18.4 ”含义 及 应 用 


我 们 从 概率 观点 来 分 析 上 节 并 说 明 它 和 第 12 章 所 导出 的 某 些 结果 的 关系 . 

人 对 偶 性 原理 . 我 们 首先 证 明 系 (3.16) 等 价 于 
引 理 1 对 于 机 co 中 任 一 区 间 也 

P{S1 < S.…,Sn_l1 < Sn, Sn € I} 
=P{S1 >0,.…, Sn-1 > 0, Sn € 1}. (4.1) 

在 12.2 节 (2.1) 中 , 我 们 通过 以 相反 次 序 考 虑 变量 X1,…, Xn 导出 过 这 个 事 
实 . 以 这 种 方法 来 考虑 , 本 引 理 是 不 言 而 喻 的 ,但 是 我 们 已 经 看 到 许多 重要 的 关系 
式 是 它 的 直接 推论 . 在 利用 傅 里 叶 分 析 讨论 时 它 不 起 作用 , 但 值得 注意 的 是 , 它 作 
为 一 个 纯 分 析 理 论 的 副产品 出 现 9 . [为 了 重新 看 看 引 理 1 关于 起 伏 的 奇特 的 推论 ， 

@ 我 们 的 传 里 叶 分 析 论 证 是 相当 初等 的 , 但 是 在 历史 上 原来 的 维 纳 - 霍 普 夫 理论 是 一 个 出 发 点 、 因 


此 , 大 多 数 文献 利用 高 深 的 复 变量 方法 ,这 在 概率 论 中 是 不 合适 的 , 因为 连 原来 的 维 纳 - 霍 普 夫 方 
法 也 可 以 通过 局 限于 正 核 而 大 大 简化 . 见 12.3 节 中 的 讨论 . 
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读者 可 参考 12.2 节 例 (b)] 
证 系 (3.16) 涉及 负 半 轴 ， 因 此 为 直接 比较 , 应 把 (4.1) 中 的 所 有 不 等 式 都 反 向 . 
于 是 (4.1) 的 右边 的 概率 与 (3.11) 中 引入 的 概率 Gn{7} 重合 ,7Y(s,《) 为 相应 的 变 
换 . 因此 , 为 证 明 引 理 , 只 和 需 证 明 [1 一 x(s,0)]-! 是 出 现在 (4.1) 的 左边 的 概率 序列 
的 变换 . 
X(s,5) 被 定义 为 首次 进入 Di oo 的 点 (N, Sw) 的 分 布 的 变换 , 从 而 x" 是 第 ~ 阶 
梯 点 (Nr, SN,) 的 变换 . 由 此 推出 
1 
ee (4.2) 
是 n 为 阶梯 时 刻 且 Sn e 了 的 概率 的 序列 的 变换 . 但 是 , 这 些 概率 是 出 现在 (4.1) 的 
左边 的 概率 , 这 就 完成 了 证 明 . > 
人) 首次 进入 机 55 的 时 刻 N 的 母 函数 7 为 r(s) = Xx(s,0), 于 是 根据 (3.6)， 


ln 一 2 =D 于 pfSn > 0}. (4.3) 


在 12.7 节 中 曾 用 组 合 方法 导出 过 这 个 公式 ， 在 那里 讨论 了 它 的 各 种 各 样 的 推论 . 
例如 ， 在 (4.3) 中 令 s 一 1 可 以 看 出 ， 为 使 变 基 N 是 正常 的 ， 当 且 仅 当 级 数 
于 mn-:P{S。> 0} 发 散 ， 在 收敛 的 情形 下 ， 随 机 游 动 趋向 -co， 把 In(1 - s) = 
一 汀 s"/n 加 到 (4.3) 上 去 , 并 令 s 一 1, 我 们 得 到 


mp(N) =tar'() = 3 1P{s, <0), (4.4) 
n=1 


只 要 N 是 正常 的 . 但 我 们 刚才 看 到 , 为 使 最 后 这 个 级 数 收敛 , 当 且 仅 当 随机 游 动 趋 
向 co ， 从 而 我 们 有 
引 理 2 为 使 和 N 是 正常 的 且 忆 (UN) < o0, 当 且 仅 当 随 机 游 动 趋向 oo. 

这 个 结果 曾 在 12.2 节 中 用 不 同 的 方法 导出 过 . 关于 N 的 分 布 的 其 他 性 质 , 请 
读者 参考 12.7 节 . 

(省) 关于 首次 进入 点 SN 的 期 望 .利用 第 12 章 的 方法 得 不 到 多 少 关于 Sw 的 分 
布 的 结论 , 但 我 们 现在 可 以 在 (3.6) 中 令 s = 1 而 获得 Sw 的 特征 函数 . 然而 最 好 
是 从 因子 分 解 公式 直接 推导 一 些 有 关 的 知识 . 

引 理 3 如 果 SN 和 SN 一 都 是 正常 的 , 且 有 有 限期 望 ,那么 下 的 期 望 为 0, 方差 
02 由 下 式 给 出 : 
2° =-[1 ~ f(DJE(SN). E(SN—). (4.5) 

下 节 定理 1 说 明 其 逆 也 是 正确 的 . 出 乎 意料 的 结论 是 , FF 的 二 阶 矩 的 存在 性 是 

保证 Sw 的 期 望 为 有 限 的 必要 条 件 . 
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证 ”对 于 s= 1, 我 们 从 (3.5) 得 到 


2 1 JP 二 二 0 = 
当 5 一 0 时 , 右边 的 分 式 趋 于 特征 函数 x 和 x” 的 导数 , 即 趋 于 还 (Sw) 和 还 (Sw 一 ). 
因此 , 左边 有 有 限 极限 o?, 这 说 明 w'(0) = 0,w"(0) = 各 由 此 推出 o 是 已 的 方 
差 ( 见 15.4 节 中 的 系 ). > 
我 们 转向 讨论 趋向 oo 的 情形 . 由 18.3 节 引 理 1、 引 理 2 和 (4.5) 可 推出 , 在 这 

种 情形 下 , 当 s 一 1,6 一 0 时 ， 


(4.6) 


[f(x-(s,0)]-! ~ exp 全 lp{s, < ") 
n=1 
=E(N) < oo. (4.7) 
于 是 根据 因子 分 解 定理 ， 
XGO _ 2 一 1. 1 
《 Ct ETO OO 
令 5 一 0, 我 们 就 得 到 重要 的 结果 ， 
E(Sw) = E(X1) . E(N), (49) 
只 要 E(Sw) 和 E(X1) 存在 (后 者 是 正 的 , 因为 假设 随机 游 动 趋向 o0). 
我 们 还 可 以 进一步 讨论 . 我 们 的 论证 表明 , 为 使 (4.8) 的 左边 趋 于 有 限 极限 , 当 


且 仅 当 w'(0) = iy 存在 . 在 17.2 节 中 曾 证 明 ,为 使 情况 是 这 样 的 ， 当 且 仅 当 我 们 的 
随机 游 动 服从 广义 弱 大 数 定律 , 即 当 且 仅 当 


(4.8) 


ESy Ep. (4.10) 


(- 怠 表示 依 概 率 收敛 ). 还 证 明了 , 对 于 正 变量 , 这 蕴含 y 与 它们 的 期 望 相 等 . 于 是 
为 使 (4.8) 的 左边 趋 于 一 个 极限 , 当 且 仅 当 E(N) < co; 为 使 (4.8) 的 右边 趋 于 一 个 
极限 , 当 且 仅 当 yp'(0) 存在 . 因此 我 们 有 
引 理 4 当 随 机 游 动 趋向 co 时 ,为 使 EE(N) < co, 当 且 仅 当 存 在 一 个 数 > 0, 使 
得 (4.10) 成 立 . 

在 12.8 节 中 我 们 只 能 证 明 E(Xi) 存在 是 充分 条 件 , 即使 对 于 这 个 较 弱 的 结果 ， 
我 们 也 需 用 到 强大 数 定律 及 其 逆 . 
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18.5 ”两 个 较 深刻 的 定理 


为 了 举例 说 明 更 精确 的 方法 的 应 用 , 我 们 推导 2 个 具有 独立 意义 的 定理 . 第 1 
个 改进 了 上 节 的 引 理 3; 第 2 个 在 排队 论 中 有 应 用 . 证 明 依赖 于 高 深 的 陶 伯 定理 ， 
第 2 个 利用 了 拉 普 拉 斯 变换 . 
定理 1 如 果 下 的 期 望 为 0 方差 为 o2, 那么 级 数 
De t ets >0}- 站 =e (5.1) 
n=1 
至 少 条 件 收效 ,并且 
E(SN) = 琅 " (5.2) 
这 个 定理 应 归功 于 斯 皮 策 尔 . 这 个 级 数 的 收敛 曾 在 12.7 节 和 12.8 节 的 定理 
中 起 过 作用 . 
证 把 (3.6) 关于 微分 并 令 4=0, 我 们 得 到 


-i 0) -5 三 zp fdz] . -em 上 D3 Pts.>0|. (5.3) 


两 个 级 数 对 |s| < 1 都 绝对 收敛, 因为 s" 的 系数 是 有 界 的 . 实际 上 , 根据 中 心 极限 
定理 ,5n/o Vn 的 阶 数 < 2 的 甜 趋 于 正 态 分 布 的 相应 矩 , 这 就 是 说 , 当 m ~ o0 时 ， 


/ 对 zF™*{dz} ~ of 至 >- (5.4) 


因此 根据 13.5 节 的 定理 5 的 容易 部 分 , 当 s 一 1 时 ， 
sm ni 二 PR TE 
3 mF"*{dr} 请 羔 万 nt 3). (5.5) 
(5.3) 的 左边 趋 于 E(Sw), 它 可 以 是 有 限 的 或 无 限 的 , 但 不 能 为 0. 因此 , 把 (5.3) 和 
(5.5) 结合 起 来 , 我 们 就 得 到 
LR c= er /1 
E(SN) = 有 区 exp b> (3 —P{Sn > 9 (5.6) 


指数 趋 于 有 限 数 或 +oo. 同样 的 论证 适用 于 N-， 即 适用 于 把 5, > 0 换 为 5% < 0 
的 指数 . 但 是 ,两 个 指数 之 和 等 于 沁 (s"/n) .P{5n = 0}, 且 当 s 一 工时 是 有 界 的 . 
由 此 推出 ，(5.6) 中 的 指数 是 有 界 的 ， 从 而 趋 于 一 个 有 限 的 极限 -< 因为 它 的 系数 
是 o(n-!), 所 以 这 蕴含? 对 于 s = 1, 级 数 收 剑 于 --c. 这 就 完成 了 证 明 . > 


@ 根据 基本 (原来 ) 的 陶 伯 定理 . 例如 , 见 E. C. Titchmarsh, Theory of Functions, 2nd ed., Oxford, 
1939, p. 10. 


la 
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其 次 , 我们 考虑 趋向 -co 的 随机 游 动 , 令 
Ma = max{0, $1, +, Sn}. (5.7) 
回忆 6.9 节 ，Mn 在 应 用 到 排队 论 中 时 表示 第 n 个 顾客 的 等 待 时 间 . 但 下 述 极限 定 
理 的 证 明 也 许 比 定理 本 身 更 有 趣 . 


定理 2 如 果 随机 游 动 趋向 -oo, 那么 Mn 的 分 布 Un 趋 于 一 个 具有 下 列 特征 函数 
由 的 极限 分 布 U: 


w(6) = exp 可 ee Dren)| {5.8) 
n=l1 


注意 , 由 (4.3)， Pp{s, > 0} < co, 从 而 (5.8) 中 的 级 数 对 具有 正 虚 部 的 所 有 
¢ 都 绝对 收敛 . 
证 设 wn 表示 Un 的 特征 函数 . 我 们 首先 证 明 , 对 于 |s| < 1， 


寺 n, 1 sr f™ icz ni 
be be | -Dr “加 |， (5.9) 


为 使 事件 {Mv e 了 } 发生, 当 且 仅 当下 列 两 个 条 件 成 立 . 第 一 , 对 某 一 0 < n < 
2, 点 (n, Sn) 是 满足 SE 了 的 阶梯 点 ; 第 二 , 对 于 所 有 的 n<k<v, Sk Sn<0. 
第 1 个 条 件 只 涉及 X1,…,Xn, 第 2 个 条 件 只 涉及 Xn+1,…,X,. 因此 这 两 个 事件 
是 独立 的 ,从 而 


P{Mve 刀 =ao 如 十 … 十 avbo， (5.10) 
其 中 
an =P{S1 < Su ,Sn_1 < Sn,Sn ETI}, bn=P{N>n}. (5.11) 
概率 an 出 现在 (4.1) 的 左边 , 我 们 看 到 它们 的 变换 为 [1 一 x(s,0)]-1.{bn} 的 母 函数 
为 [1 一 7(s)]/(1 一 s), 其 中 7 由 (4.3) 确定 . 由 卷 积 的 性 质 (5.10) , 这 些 函数 的 乘积 
表示 概率 P{Mn e 了 } 的 变换 ，(5.9) 只 是 记录 了 这 个 事实 . 
我 们 已 经 注意 到 ，(5.8) 和 (5.9) 中 的 指数 对 于 具有 正 虚 部 的 所 有 是 正则 的 . 
因此 , 对 和 > 0, 我 们 可 以 设 5 = i, 这 导致 拉 普 拉 斯 变换 


wnliX) = 人/ efdz} = 入 / eeUnejdz、 (5.12) 
0 
由 最 大 值 M， 的 序列 的 单调 性 可 以 推出 , 对 于 固定 的 z, 序列 {Un(z)} 递减 , 从 而 


对 于 固定 的 X， 拉 普 拉 斯 变换 wnGA) 形成 一 递减 序列 . 由 (5.9) 我 们 有 , 当 s 一 1 
时 ， 


swt)) 总 To). (5.13) 


n=0 
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根据 13.5 节 的 陶 伯 定理 的 最 后 部 分 这 蕴含 wn(i 和 ) 一 w(i 和 ). 这 蕴含 断言 的 收敛 
Un—=U. > 


18.6 ” 常 返 性 准则 


本 节 的 内 容 与 上 述 理论 无 关 . 它 把 钟 开 莱 (K. L. Chung) 和 富 克 斯 (W. H. J. 
Fuchs) (1950) 发 展 起 来 的 方法 用 来 决定 随机 游 动 是 常 返 的 还 是 瞬时 的 . 尽管 有 第 6 
章 和 第 7 章 所 述 的 准则 和 方法 , 傅 里 叶 分 析 方 法 仍 有 其 方法 论 的 意义 及 历史 的 意义 ， 
且 目 前 是 可 应 用 于 高 维 的 唯一 方法 . 以 下 下 表示 一 个 特征 函数 为 (6) = u(6)+iv(《) 
的 一 维 分 布 . 

对 于 0<s<1, 我 们 引入 有 限 测度 


U,= > Eg el (6.1) 


n=0 
按照 6.10 节 所 述 的 理论 , 为 使 分 布 是 瞬时 的 , 当 且 仅 当 对 于 包含 原点 的 某 一 开 
区 间 了 当 s 一 1 时 , Us{71} 是 有 界 的 . 在 这 种 情形 下 , 对 每 个 开 区 间 1,U。{T} 是 有 
界 的 . 不 是 瞬时 的 分 布 称 为 常 返 分 布 . 
准则 ”分布 已 是 瞬时 的 ， 当 且 仅 当 对 某 一 > 0, 当 s 一 1 时 ， 
1 工 一 su 
人 二 sd)2 十 s202 从 (6.2) 


是 下 有 界 的 . 

(即将 看 到 , 在 相反 的 情形 下 , 积分 趋 于 oo.) 
证 (i) 假设 积分 (6.2) 对 某 一 固定 的 a> 0 是 有 界 的 . 把 15.3 节 (3.2) 帕 塞 瓦尔 关 
系 式 应 用 于 F"* 和 一 个 三 角形 密度 ( 表 15-1 中 第 4 号 分 布 ) 可 得 


2 rs) = (1- A) ra (63) 
乘 以 s" 并 对 n 求 和 ,我 们 得 到 
Ls ON G - a) Te 


Bt oe 1 一 su 
a [ Q 9 (1— su)?+ Fd. (0 


(由 于 9 的 实 部 是 偶 函 数 ， 虚 部 是 奇 函 数 ). 设 工 表示 区 间 jz| < 2/a. 对 于 > eT, 左 
边 的 被 积 函数 >3 了, 从 而 Us{ 了 } 是 有 界 的 . 因此 , 定理 的 条 件 是 充分 的 . 
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(ii) 为 了 证 明 条 件 的 必要 性 , 我 们 把 帕 寒 瓦尔 关系 式 应 用 于 表 15-1 中 第 5 号 
分 布 , 此 分 布 的 特征 函数 当 KK| < a 时 为 1 一 |Cl/a. 这 把 (6.4) 换 为 


广 (- 划 太一 人 区 站 nd (6.5) 


(1 一 su)2 十 s52v2 


对 于 一 个 瞬时 的 已 , 左边 是 有 界 的 ,因此 积分 (6.2) 是 有 界 的 . 
作为 一 个 应 用 , 我 们 证 明 一 个 曾 在 6.10 节 的 定理 4 让 用 不 同方 法 证 明 过 的 引 
理 . 对 于 进一步 的 例子 , 见习 题 13~ 习题 16. 
引 理 18 期望 为 0 的 概率 分 布 是 常 返 的 . 
证 特征 函数 的 导数 在 原点 处 等 于 0， 从 而 我 们 可 以 选取 这 样 小 的 a, 使 得 当 0 < 
46<a 时 ， 
0g1—u(C) < el. 


于 是 1 一 su(《4) < 1 一 s+el, 利用 不 等 式 2|zy| < 十 妨 , 可 见 (6.2) 中 的 积分 
(1-s)d6 _1 ae bb 


>3 o (1 一 s)2+e262 3e elon Se 68 
右边 可 以 任意 大 , 因此 积分 (6.2) 趋 于 oo. p 
准则 中 的 取 极 限 是 比较 难以 处 理 的 ， 因 此 知道 下 列 系 中 的 比较 简单 的 充分 条 
件 是 有 用 的 . 
系 如果 对 于 每 个 a > 0， 


本 1—u 
re 09 
那么 概率 分 布 天 是 常 返 的 . 如 果 对 于 某 一 a > 0， 
“dé < oo， (6.7) 


那么 概率 分 布 尺 是 取 时 的 - 

证 当 (6.2) 的 分 子 中 的 1 一 su 换 成 1 一 u, 分 母 中 的 sv 换 成 b 时 ，(6.2) 中 的 被 
积 函 数 变 小 了 . 于 是 (6.6) 可 根据 单调 收敛 性 推出 . 类 似 地 , 当 (6.2) 中 的 项 szv2 去 
掉 时 , (6.2) 中 的 被 积 函 数 变 大 了 , 于 是 (6.7) 可 根据 单调 收敛 性 推出 . Pp 


@ 钟 开 莱 和 Fuchs 首先 证 明了 E(X5) 二 0 理 含 常 返 性 这 个 事实 ， 有 趣 的 是 ， 在 1950 年 ,证明 
这 个 结果 却 是 一 个 非常 难 的 问题 ， 许 多 为 解决 它 而 作 的 努力 都 以 失败 而 告终 . 由 于 意外 地 发 现 了 
P{Sn > n/Iinn} 一 1 的 “公平 "随机 游 动 , 所 以 人 们 把 注意 力 集中 在 这 个 问题 上 了 . 见 第 1 卷 10.3 
节 和 第 1 卷 10.8 节 中 的 习题 15. 有 关 的 现象 见习 题 13 的 丢 注 . 
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这 些 准则 可 以 毫 无 改变 地 应 用 于 高 维 中 ， 所 不 同 的 只 是 w 和 v 变 成 几 个 变量 
6 的 函数 了 , 积分 区 域 变 为 以 原点 为 中 心 的 球面 了 . 这 样 我 们 就 证 明了 下 列 准则 . 
引 理 2 ”一 个 期 望 为 0, 方差 有 限 的 非 逮 化 的 二 维 概率 分 布 是 常 返 的 . 
证 特征 函数 是 二 次 连续 可 微 的， 由 包含 两 项 的 泰勒 展开 式 ， 可 见 在 原点 的 一 个 
邻 域内 ，(6.6) 的 被 积 函 数 > 5/(G + 63). 因此 ,相应 于 (6.6) 的 积分 发 散 . > 
引 理 3 ”每 个 非 退 化 的 三 维 分 布 是 肥 时 的 . 
证 考虑 cos(zl6l + zz6a + zs6s) 在 原点 的 某 z 邻 域内 的 泰勒 展开 式 ， 我 们 看 到 对 
于 任 一 特征 函数 , 存在 原点 的 一 个 邻 域 , 使 得 在 此 邻 域内 


1— ub1,62,63) >5( 人 十 全 十 人 9). 


因此 , 类 似 于 (6.7) 的 三 维 积分 被 (他 十 台 士 68) 在 原点 的 一 个 邻 域 上 的 积分 所 控 
制 , 在 三 维 中 这 个 积分 收敛 . 有 


18.7 习 题 


1. 在 非 对 称 区 间 一 a,5 的 情形 下 研究 18.1 节 的 例子 .( 对 相应 于 两 个 边界 的 两 个 母 函 数 推 
导 两 个 线性 方程 . 显 式 解 是 很 麻烦 的 .) 


习题 2~ 习题 5 涉及 对 称 二 项 随机 游 动 , 即 2(5) = cosc. 我 们 沿用 18.1 节 的 记号 , 
2 设 4 由 两 点 0, 1 组 成 利用 初等 方法 来 证 明 , x(,6) = 一 二 一 (Se*+ 生 "<)， 
1— -8 
4 


2 


(8,6) = (1+ 和 . 验证 (1.9), 
-和 


3. 如 果 在 上 题 中 把 4 和 4 的 作用 交换 ， 我 们 就 得 到 x(s,5) = 3 +a 了 -VI=s5)， 


3 
(eg = 下 - 二 办 二 全。 用 概率 论语 言 进行 解释 

4 如果 入 只 包含 原点 ,那么 x 只 依赖 于 .7 一定 是 两 个 分 曾 关于 ex 和 erx 的 竺 级 数 
之 和 . 利用 这 个 信息 从 (1.9) 直接 推导 X 和” 

5 如 果 4 只 包含 原点 ,那么 我 人 有 X = ap, 7 =1 

6. 性 等 式 (1.9) 的 另 一 种 证 明 .利用 18.1 节 的 记号, 证明 


Oe = ,ma + oo). 
ki A’ 


(a) 利用 直接 的 概率 论证 ，(b) 利用 归纳 法 . 证 明 : (*) 等 价 于 (1.9). 

7. 在 (不 一 定 对 称 的 ) 二 项 随机 游 动 的 情形 下 , 18.2 节 的 瓦尔 德 逼近 导致 一 个 严格 解 . 证 
明 : (2.12) 化 成 7 = e ”的 一 个 二 次 方程 , 我 们 导出 的 解 将 与 在 第 1 卷 14.4 节 (4.11) 
中 知道 的 解 重合 . 特别 , Q(s) 和 Uz 重合 ,所 不 同 的 是 , 后 者 涉及 基本 区 间 世 a, 而 不 
是 二 05 而 且 还 涉及 一 个 起 点 z. 
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8. 和 在 18.2 节 中 一 样 , 设 Gn{I} 是 SeTCc 4 且 以 前 没 离开 过 4 = 二 a,5 的 概率 . 证 
明 , 如 果 两 个 分 布 F 和 F# 在 区 间 jz| < ea 十 5 内 重合 , 那么 它们 导致 相同 的 概率 Gn. 
利用 这 点 和 一 个 适当 的 截 尾 给 出 级 教 (2.1) 对 某 一 s > 1 收敛 这 个 事实 的 另外 一 种 证 
明 . 

9. 12.4 节 例 (c) 曾 讨论 过 这 样 的 随机 游 动 , 在 其 中 分 布 天 集中 于 有 限 多 个 整数 上 . 证 明 ， 
那里 导出 的 公式 蕴含 1 - y 的 维 纳 - 霍 普 夫 分 解 . 

10. ( 辛 钦 - 波 拉 杰克 公式 ). 设 瑚 是 一 个 集中 于 05 上 的 期 望 为 1/a 的 指数 分 布 与 一 个 
集中 于 =o6,0 上 的 分 布 B 的 卷 积 , 用 8 表示 B 的 特征 函数 , 用 -5 < 0 表示 它 的 期 
望 . 我 们 假设 FF 的 期 望 a-! 一 b 是 正 的 , 那么 


1-p0=1- 30- (1 a7) -oe)- 


注 ”这 个 公式 在 排队 论 中 起 着 重要 的 作用 . 关于 另 一 种 处 理 方法 , 见 12.5 节 (a 一 台 ) 
和 14.2 节 例 (b). 


11. ( 续 ) 如 果 ab > 1, 证 明 , 在 0 和 a 之 间 存 在 唯一 的 一 个 正 数 «, 使 得 


aB(-ir) = a 一 上 


Re pe 


证 明 , x (1,6) = 9 各 9, 提示 , 把 习题 10 应 用 于 特征 函数 为 “p(C) = PC 一 ix) 


的 相伴 随机 游 动 注意 X-(1,C) =* Xx-(1,C -in). 见 12.4 节 例 (b)] 
12. 设 Un = maxlo, SS Va = Sn Un. 把 (5.9) 所 用 的 论证 稍 做 修改 , 证明; 对 偶 
(Un Vm) 的 二 元 特征 函数 是 下 式 中 s" 的 系数 : 


Ts ep 三 岂 [fe Dept] +/ ee — DE"™*{de}. 


13. 9 假设 在 原点 的 一 个 邻 域内 |1 一 p(C)| < 4.16|, 那么 下 是 常 返 的 , 除非 它 的 期 望 六 0. 


长 示 ，(66) 中 的 积分 大 于 [ac 人 本 zaptdz} 引入 代 换 5 = 1/t 并 交换 积分 次 序 
可 以 看 出 ,除非 4 存在 ,否则 积分 发 散 


@ F. Spitzer, Trans. Amer. Math. Soc., vol. 82(1956) pp. 323-339 一 文 首先 用 分 析 方法 导出 了 
这 个 结果 . 

@@ 这 个 问题 具有 理论 意义 , 当 % 在 原点 有 导数 时 ,就 可 应 用 这 个 结果 . 我 们 曾 在 17.2 节 中 看 到 , 即 
使 F 的 期 望 不 存在 , 这 也 是 可 能 的 , 在 F 的 期 望 不 存在 时 弱 大 数 定律 仍 能 应 用 . 因此 我 们 得 到 随 
机 游 动 的 一 些 例子 ,在 其 中 对 于 充分 大 的 mn, Sn > (1 一 e)np(j > 0) 有 很 大 的 概率 , 但 不 趋向 oo 
随机 游 动 是 常 返 的 . 
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14. 利用 准则 (6.7) 证 明 : 如 果 对 某 一 p> 0, 当 t 一 oo 时 二 1 / “22F{dz} -oo, 那么 


分 布 已 是 瞬时 的 .@ 

15. 特征 函数 为 p(C) = e-! 于 1/nlcos(nl6) 的 分 布 是 瞬时 的 .提示 : 利用 (6.7) 和 变量 替换 
56= (1/nD)t. 

16. 特征 指数 为 a = 1 的 非 对 称 稳定 分 布 是 肯 时 的 , 但 柯 西 分 布 是 常 返 的 . 


@ 这 说 明 , 在 较 弱 的 正则 性 条 件 下 , 如 果 p < 1 阶 绝对 短发 散 , 那么 是 性 时 的 . L. A. Shepp, Bull. 


Amer. Math，Soc., vol 70(1964) pp. 540-542 说 明了 这 个 问题 在 没有 任何 正则 性 条 件 的 情况 
下 的 复杂 性 


第 19 章 调和 分 析 
本 章 补充 了 第 15 章 所 述 的 特征 函数 理论 ， 并 给 出 了 在 随机 过 程 和 随机 积分 中 


的 应 用 . 19.5 节 中 的 关于 泊 松 求 和 公式 的 讨论 实际 上 与 其 余 各 节 是 独立 的 . 整个 理 
论 与 第 16 章 到 第 18 章 独 立 . 


19.1 ” 帕 塞 瓦尔 关系 式 
设 UU 是 一 个 特征 函数 为 


“0= /eves (LD) 
的 概率 分 布 . 把 这 个 关系 式 关于 某 一 其 他 概率 分 布 进行 积分 , 我 们 得 到 
Oo 十 oo 
人 OPGag = 三 wotaah (19) 


其 中 p 是 的 特征 函数 . 这 是 帕 塞 瓦尔 关系 式 的 一 种 形式 ,15.3 节 中 的 基本 结果 
就 是 由 此 关系 式 推导 的 . 十 分 意外 的 是 ,把 帕 塞 瓦尔 公式 改写 成 等 价 形 式 并 考虑 其 
特殊 情形 可 以 得 到 许多 新 的 信息 ， 一 个 具有 独立 意义 的 简单 例子 可 以 说 明 这 个 方 
法 ,这 个 方法 将 被 多 次 运用 . 
例 公式 
十 co 十 oo 
[oOrtac=/ eta)Ufa+ de) (13) 


只 是 在 记号 上 与 (1.2) 有 所 不 同 ， 我 们 应 用 下 述 特殊 情形 : F 是 =5t 上 的 均匀 分 
布 , p(z) = sintz/tz. 这 个 函数 的 绝对 值 不 大 于 1,， 且 当 t 一 oo 时 它 在 所 有 z 关 0 
的 点 上 趋 于 0. 因此 , 根据 有 界 收敛 定理 ,我 们 有 

To) -Do-)= lim J / " oe-iatw(C)d. (1.4) 


t—00 2t J 
这 个 公式 可 以 确定 a 是 不 是 连续 点 并 求 出 在 a。 上 的 原子 的 质量 (如 果 有 的 话 ). 最 
有 趣 的 结果 是 通过 把 (1.4) 应 用 于 特征 函数 为 lw|? 的 对 称 化 了 的 分 布 0T 而 得 到 的 . 
如 果 p1,p2,… 是 U 的 原子 的 质量 , 那么 "U 在 原点 上 有 质量 为 污 成 的 原子 (5.12 
节 中 的 习题 11), 从 而 


t 
支 / woPa 一 于 并 (15) 
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特别 地 , 这 个 公式 表明 , 连续 分 布 的 特征 函数 平均 说 来 是 很 小 的 . 
帆 塞 瓦尔 公式 (1.2) 的 一 个 可 应 用 于 许多 方面 的 变形 如 下 所 述 . 如 果 4 和 BB 
是 特征 函数 分 别 为 a 和 6 的 任意 概率 分 布 ， 那 么 


+o0 
/ | ws —t)A{ds}B{dt} = / Oo)BE)U {dz), (1.6) 


其 中 是 6 的 共 二 . 欲 直接 验证 ,只 需 把 
w(s -人 = / eco-oztrtdz} (1.7) 


关于 4 和 B 积分 就 行 了 . 这 个 论证 使 人 产生 一 个 错觉 , 即 (1.6) 比 (1:2) 更 一 般 , 而 
关系 式 (1.6) 实际 上 是 相应 于 下 A 克 -B 的 帕 塞 瓦尔 关系 式 (1.2) 的 特殊 情形 , 其 
中 -B 是 特征 函数 为 厅 的 分 布 即 在 所 有 的 连续 点 上 -B(z) = 1 一 B(-z)]. 实际 上 
下 的 特征 函数 为 p = a5， 从 而 (1.2) 的 右边 和 (1.6) 的 右边 相等 . 利用 两 个 分 布 分 
别 为 4 和 如 的 独立 随机 变量 X 和 了 最 容易 看 出 ，(1.2) 和 (1.6) 的 左边 只 是 记号 
上 有 所 不 同 . (1.6) 的 左边 表示 期 望 BCw(X 一 了 )) 的 直接 定义 , 而 (1.2) 的 左边 则 用 
和 -YY 的 分 布 表示 这 个 期 望 . 
(我 们 将 在 19.7 节 中 回 过 头 来 讨论 帕 塞 瓦尔 公式 . ) 


19.2 正定 函数 


一 个 应 归功 于 8. 波 赫 纳 (1932) 的 重要 定理 使 我 们 能 够 用 其 内 在 的 性 质 来 描述 
特征 函数 类 . 下 列 简单 的 准则 指明 了 方法 . 
引 理 1 设 w 是 在 二 6655 上 可 积 0 的 有 界 连续 ( 复 值 ) 函数 . 把 以 定义 为 


uz) = 去 人 及 eizw(C)dc. 21) 


为 使 w 是 特征 画 数 ， 当 且 仅 当 w(0) = 1， 且 对 于 所 有 的 zu(z) > 0. 在 这 种 情形 
下 ,UU 是 相应 于 w 的 概率 密度 . 

证 15.3 节 (3.5) 傅 里 叶 反 演 公 式 说 明 条 件 是 必要 的 . 现在 选取 具有 可 积 特征 函数 
9 > 0 的 任意 偶 密度 f. 用 p(tiz)e"? 乘 以 (2.1) 并 关于 z 进行 积分 . 因为 15.3 节 
(3.5) 反 演 公式 适用 于 对 偶 f,y, 所 以 结果 是 


fe: u(z)p(tz)eirdz = fe 


@ 跟 别 处 一 样 , 这 意味 着 绝对 可 积 性 


9) 尾 . (2.2) 
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右边 是 w 关 于 一 个 概率 分 布 的 期 望 , 从 而 它 以 |w| 的 最 大 值 为 界 . 对 于 特殊 值 = 0， 
左边 的 被 积 函数 是 非 负 的 , 且 当 t 一 0 时 趋 于 w(z). 因此 , 积分 的 有 界 性 蕴含 4 是 
可 积 的 . 因此 , 在 (2.2) 中 , 令 t 一 0, 我 们 得 到 


/ 0() (2.3) 


(左边 是 根据 有 界 收敛 性 , 右边 是 由 于 所 涉及 的 概率 分 布 趋 于 集中 在 点 a 上 的 分 布 ). 

对 于 a = 0, 我 们 看 出 , w 是 一 个 概率 密度 , w 确实 是 它 的 特征 函数 . p 

引 理 的 可 积 性 条 件 看 上 去 很 强 . 事实 上 , 根据 连续 性 定理 ,为 使 一 个 连续 函数 

w 是 特征 函数 ， 当 且 仅 当 对 于 每 个 固定 的 。 > 0, w(6)e-e《 是 一 个 特征 函数 . 由 此 

推出 , 为 使 一 个 满足 w(0) = 1 的 有 界 连 续 函 数 是 特征 函数 , 当 且 仅 当 对 于 所 有 的 z 
和 e>0， 

/ ezw(C)e-e¢*dc > 0. (2.4) 


这 个 准则 是 十 分 一 般 的 ， 但 是 不 容易 应 用 于 各 种 特殊 情形 . 此 外 ,收敛 因子 e-<6 
的 任意 选择 也 是 一 个 缺点 . 因此 , 我 们 以 如 下 的 形式 来 重新 叙述 这 个 准则 ,在 其 中 
条 件 被 加 强 了 . 

引 理 2 ”为 使 一 个 有 界 连 续 函 数 w 是 特征 画 数 ， 当 且 仅 当 w(0) = 1， 且 对 于 每 个 
概率 分 布 4 和 所 有 的 工 ， 


站 ceo4fdc) > 0， (2.5) 


其 中 "4 = 4 娘 -44 是 利用 对 称 化 得 到 的 分 布 . 
证 (a) 必要 性 ， 如 果 a 是 4 的 特征 函数 , 那么 "4 的 特征 函数 为 |a|?，(2.5) 的 
必要 性 列 含 在 帕 塞 瓦尔 关系 式 (1.3) 中 . 

(b) 充分 性 ， 在 (2.4) 中 曾 证 明 , 如 果 把 4 限制 分- 
那么 条 件 是 充分 的 . 

我 们 曾 看 到 (2.5) 可 以 改写 成 (1.6) 的 形式 (其 中 B = 4). 特别 , 如果 4 条 中 
于 具有 相应 质量 为 p1,p2,… ,pn 的 有 限 多 个 点 ,to,…,tn 上 , 那么 (2.5) 旦 形式 


Dlty — tk)e (sth)pjpk > 0. (2.6) 
jk 
如 果 这 个 不 等 式 对 ty 和 p; 的 所 有 选择 都 成 立 , 那么 对 于 具有 有 限 多 个 原子 的 所 有 


离散 分 布 (2.5) 都 成 立 . 因为 每 个 分 布 都 是 这 样 的 离散 分 布 的 序列 的 极限 ,所 以 
条 件 (2.6) 是 充分 必要 的 . 令 zj = pje-*4, 它 呈 形式 


Dwltj ~ tr)2i2k > 0. (2.7) 
Fa 
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为 了 我 们 的 准则 的 最 后 阐述 , 我 们 引入 一 个 常用 术语 . 
定义 ” 当 且 仅 当 对 于 有 限 多 个 实数 妇 ,… ,tn 和 复数 z1，,…,zn 的 每 一 种 选择 , (2.7) 
都 成 立时 ， 称 实 变量 土 的 复 值 函数 w 为 正定 的 . 
定理 ( 波 赫 纳 ) 为 使 一 个 连续 函数 w 是 一 个 概率 分 布 的 特征 函数 ， 当 且 仅 当 它 是 
正定 的 , 且 w(0)=1. 
证 我们 已 经 证 明了 条 件 是 必要 的 , 也 证 明了 当 w 有 界 时 条 件 是 充分 的 . 利用 下 
述 引 理 就 可 完成 证 明 , 这 个 引 理 证 明 所 有 的 正定 函数 都 是 有 界 的 . > 
引 理 3 对 于 任 一 正定 的 w， 


w(0) > 0 lw(D| < w(0), (2.8) 

w(-t) = w(t). (2.9) 

证 ”我们 利用 n=2 时 的 (2.7), 并 令 to = 0,z2 = 1. 去 掉 不 必要 的 下 标 , 我 们 得 到 
w(O)[1+ 1z|I+ w(t)z +w(—t)z > 0. (2.10) 


对 z=0 可 以 得 到 w(0) > 0. 对 于 正 的 z, 我 们 得 到 (2.9). 由 此 推出 , 如 果 w(0) = 0， 
那么 w = 0， 最 后 ,如果 w(0) 关 0,z = 一 w/w(0), 那么 (2.10) 化 成 lw(bP < 
ww2(0). p 


19.3 平稳 过 程 


上 一 定理 在 具有 平稳 协 方差 的 随机 过 程 中 有 重要 的 推论 ， 所 谓 具 有 平稳 协 方 

差 的 随机 过 程 ， 指 的 是 定义 在 -oo < t < co 上 的 这 样 一 族 随机 变 基 {Xt}, 具有 这 
样 的 协 方差 , 使 得 

Cov(Xatt, Xs) = p(t) (3.1) 
与 s 无 关 . 至 今 我 们 考虑 的 都 是 实 随机 变 基 , 但 是 如 果 我 们 允许 复 值 随 机 变量 , 那 
么 记号 就 变 得 更 简单 更 系统 了 . 当然 , 复 随机 变量 只 是 写成 形式 X = U +iV 的 一 
对 实 变量 , 对 于 U 和 Y 的 联合 分 布 无 需 做 什么 假设 . 变量 对 =U 一 iV 称 为 X 的 
共 轿 变量 , 乘积 XX 起 在 实 函数 论 中 X? 所 起 的 作用 . 这 就 使 得 方差 与 协 方差 的 定 
义 稍 有 点 不 对 称 . 
定义 ”对 于 满足 

E(X)= E(Y)=0 

的 复 随 机 变量 ,我们 定义 

Cov(X,Y) = E(XY). (3.2) 
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于 是 Var(X) = E(IX2|) > 0, 但 Cov(Y,X) 是 Cov(X,Y) 的 共 筑 . 
定理 设 {Xt} 是 这 样 一 族 随 机 变量 , 使 得 


plt) = E(Xt+sX,) (3.3) 
是 与 5 无 关 的 连续 函数 .那么 p 是 正定 的 ， 即 


= [aay (84) 


其 中 忆 是 实 直线 上 的 一 个 总 质量 为 p(0) 的 测度 . 
如 果 变 量 Xt 是 实 变量 ,那么 测度 忆 是 对 称 的 ,并且 


十 oa 
plt) =/ cos MR{dAM}. (3.5) 
证 选取 任意 的 实数 点 妇 ,…,tn 和 复 常数 z1,…,zn, 于 是 


po 一 大 )27Zk = DBE(Xu Kur)zjzk 


=B(D Xz Ruz:) 

=E(| Dxual) >0. (3.6) 
从 而 根据 上 节 的 准则 ，(3.4) 成 立 . 当 p 是 实 函 数 时 , 关系 式 (3.4) 对 通过 把 z 变 成 
-2z 得 到 的 镜像 测度 也 成 立 . 由 唯一 性 知 ,R 是 对 称 的 . > 


测度 尺 称 为 过 程 的 谱 测度 2 ,由 它 的 增 点 构成 的 集合 称 为 {X4} 的 谱 . 在 大 多 数 
应 用 中 , 变量 被 这 样 定 中 心 , 使 得 (Xt) = 0. 在 这 种 情形 下 , p(t) = Cov(Xe+s,X。). 
因此 , p 通常 称 为 过 程 的 协 方差 滞 数 . 实际 上 Xs 的 中 心 常数 并 不 影响 我 们 即将 讨 
论 的 过 程 的 性 质 . 

例 (a) 设 3，……2n 是 期 望 为 0, 方差 为 7,…,o2 的 互 不 相关 的 随机 变量 , 令 


Xe = Bieit 十 十 Zneint (3.7) 
其 中 入,…, 和 Xn 是 实数 , 那么 
plt) = ofe Nt + .+ oe, (3.8) 


从 而 已 集中 于 壮 个 点 入,…, Xn 上. 我 们 即将 看 到 , 最 一 般 的 平稳 过 程 可 以 看 作 是 
本 例 的 极限 情形 . 
@ 连续 性 是 重要 的 , 对 于 相互 独立 的 变量 Xt, 除 t 二 0 外 , 我 们 有 p() = 0, 且 这 个 协 方差 函数 不 具 


有 (3.4) 的 形式 . 见习 题 4. 
@ 在 通讯 工程 中 也 称 为 “功率 计 ”- 


19.3 平稳 过 程 561 


如 果 过 程 (3.7) 是 实 的 , 那么 可 以 把 它 写成 形式 


KX: = UicosMt+:.*+ UncosMt+ VisinAt 
十 … 十 人 多 sin Mnt, 


其 中 U; 和 Vi 是 不 相关 的 实 跑 机 变量 , 且 
E(U?) = E(V?) = 03. 


一 个 典型 的 例子 出 现在 3.7 节 (7.23) 中 . 相应 的 协 方差 是 p(t) = of cos Ntt 十 … 十 
02 cos Art. 

例 (b) 马尔 可 夫 过 程 . 如 果 变量 X 是 正 态 的 , 过 程 是 马尔 可 夫 过 程 , 那么 p(t) = 
ell[ 见 3.8 节 (8.14)]. 谱 测度 与 柯 西 密度 成 比例 . 

例 (c) 设 和 = ZeitY, 其 中 Y 和 2 是 独立 的 实 随机 变量 , E(Z) = 0, 那么 


p(t) = E(Z22)E(e'Y ). 


此 式 表明 谱 测度 已 为 Y 的 概率 分 布 乘 以 因子 E(23). > 
在 理论 上 , 过 程 是 用 它 的 协 方差 函数 p 描述 的 还 是 用 它 的 相应 谱 测 度 描述 

的 是 无 关 紧 要 的 , 但 是 在 实际 中 利用 谱 测 度 R 来 描述 通常 是 比较 简单 比较 可 取 的 . 

在 应 用 于 通讯 工程 时 , 谱 测 度 在 仪器 测试 和 测量 中 有 技术 上 的 优点 , 但 是 我 们 不 详 

细 研 究 这 个 问题 . 从 我 们 的 观点 来 看 , 具有 重要 意义 的 是 , 利用 RR 比 利 用 p 更 容易 

描述 变 基 Xt 的 线性 运算 (通常 称 为 “滤波 器 ”). 

例 (d) ”线性 运算 . 作为 一 个 最 简单 的 例子 , 考虑 一 族 由 


Y= DXen, (3.10) 


定义 的 随机 变量 YX, 其 中 ce 和 从 是 常数 (rx 是 实数 ), 和 是 有 限 的 . Y; 的 协 方差 函 
数 是 二 重 和 ， 


(3.9) 


pr 的 = 》 cdrp(t — T+ 7k). (3.11) 
代入 (3.4), 我 们 求 得 


十 oo 
py(t)= 人 [DD ee-is>|PeitAR{dA}. 
这 说 明 谱 测度 Ry 由 
Ry{fdA} =1》 ce "PR{dA} (3.12) 


确定 . 和 (3.11) 相反 , 这 个 关系 式 有 一 个 直观 的 解释 :“ 频 率 ” 和 受到 “频率 响应 因 
子 ”f( 和 ) 的 影响 ,f(A) 依赖 于 给 定 的 变换 (3.10). 
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这 个 例子 的 应 用 范围 比 乍 一 看 来 要 广泛 得 多 , 因为 积分 和 导数 都 是 形 如 (3.10) 
的 极限 , 因此 类 似 的 陈述 也 适用 于 它们 . 例如 , 如 果 Xt 是 一 个 标准 电路 的 输入 , 那 
么 输出 Y 可 用 包含 X: 的 积分 来 表示 ,， 谱 测度 Ry 也 可 用 R 和 频率 响应 来 表示 . 
后 者 依赖 于 电网 的 特征 ,我 们 的 结果 可 以 应 用 于 两 个 方面 ， 即 用 于 描述 输出 过 程 ， 
也 可 用 来 构造 这 样 的 电网 , 使 其 产生 一 个 具有 某 些 指定 性 质 的 输出 . > 

我 们 转向 我 们 的 定理 的 道 ,并 证 明 ,给 定 直线 上 的 任 一 测度 R, 存在 一 个 谱 测 
度 为 鼠 的 平稳 过 程 {Xt}. 因为 映射 XX: 一 aXt 把 已 变 成 2R, 所 以 不 失 一 般 性 可 
设 刀 是 一 个 概率 测度 . 我 们 取 具 有 概率 测度 R 的 和 轴 作为 样本 空间 , 并 用 Xt 表 
示 由 Xi( 和 ) = et 定义 的 随机 变量 . 那么 


和 
Ap 的 -ECX = {eR (8.13) 


从 而 我 们 的 过 程 的 谱 测度 为 R. 因此 , 我 们 构造 了 一 个 具有 指定 的 谱 测 度 的 平稳 过 
程 的 显 式 模型 . 出 乎 意外 但 令 人 满意 的 是 , 这 样 的 模型 对 于 以 实 直 线 作 为 样本 空间 
的 情况 是 可 能 的 . 我 们 将 在 19.8 节 回 过 头 来 讨论 它 . 

容易 改变 这 个 模型 ， 以 便 得 到 期 因为 0 的 变量 . 设 Y 是 一 个 与 所 有 的 Xi 独立 的 
随机 变 其 . 并 且 取 值 + 的 概率 都 是 3. 令 Xt = 了 Xe 那么 E(Xt) = 0,E(Xt4sX,) = 
PE(Y2)E(Xi+sX。). 因此 , {Xj 是 一 个 期 望 为 0 的 平稳 过 程 ，(3.13) 表示 它 的 真实 协 
方差 函数 . 


19.4 ” 伟 里 叶 级 数 
一 个 对 点 n 赋 于 概率 pw 的 算术 分布 具有 周期 为 2r 的 特征 卫 数 
oO = pon. CD 
概率 p 可 以 用 友 演 公式 
-去 人 vac (a2) 


表示 , 这 容易 由 (4.1) 验证 [ 见 15.3 节 (3.14)]. 

我 们 现在 从 周期 为 2r 的 任 一 函数 p 开始 , 并 用 (4.2) 定义 pk. 我 们 的 问题 是 
决定 p 是 不 是 一 个 特征 函数 , 即 {pn} 是 不 是 一 个 概率 分 布 . 方法 依赖 于 对 一 族 函 
数 所 (0 <7 < 了 1) 的 性 质 的 研究 , fr 是 由 


十 co 


fr(0) = > onrlei (4.3) 


一 oo 
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定义 的 . 尽管 它 非常 简单 , 但 利用 同样 的 论证 将 得 到 关于 伟 里 叶 级 数 和 集中 于 有 限 
区 间 上 的 分 布 的 特征 函数 的 重要 结果 . 

在 下 文中 最 好 把 基本 区 间 二 元 元 看 作 是 一 个 圆 ( 即 把 点 xt 和 -x 视 为 一 点 ). 
对 于 可 积 的 p, 数 pk 称 为 p 的 第 大 个 传 里 叶 系 数 . 出 现在 (4.1) 中 的 级 数 是 相应 的 
“形式 上 的 传 里 叶 级 数 ”. 它 不 一 定 收敛 , 但 是 因为 序列 {yp。} 是 有 界 的 , 所 以 级 数 
(4.3) 收敛 于 一 个 连续 (甚至 可 微 ) 的 函数 f+. 当 7 一 1 时 , 即使 (4.1) 中 的 级 数 发 
散 , f; 也 可 能 趋 于 一 个 极限 光 . 在 这 种 情形 下 , 我 们 说 级 数 是 “ 阿 贝 尔 可 和 的 ”, 其 
和 为 消 
例 (a) 对 n=0,1,2,… 设 pn=1; 对 于 n<0, 设 pn =0. (4.1) 中 级 数 的 每 一 项 
的 绝对 值 都 是 1, 从 而 级 数 对 于 任 一 值 ¢ 都 不 收敛 . 另 一 方面 ,(4.3) 的 右边 化 为 几 
何 级 数 ， 此 级 数 收敛 于 


下 


fr(O)= Trer (4.4) 
当 7 一 1 时 , 对 于 除 5 = 0 外 的 所 有 点 , 极限 都 存在 . 
例 (b) (4.3) 的 一 个 重要 特殊 情形 可 用 函数 
Lnleint 
Pr = re (4.5) 


表示 , 此 函数 是 当 对 于 所 有 的 n, pn = 1/(2r) 时 得 到 的 . (4.4) 中 计算 了 满足 n> 0 
的 项 的 贡献 . 由 对 称 性 我 们 得 到 


1 1 
2rpr(t) = Ire ti (4.6) 


或 者 | 

的 
歼 TT rcost (47) 
在 调和 函数 论 中 经 常 使 用 这 个 函数 . 在 这 个 理论 中 , p(t 一 4) 称 为“ 泊 松 核 ”. 为 了 
便于 参考 引用 , 我 们 把 它 的 主要 性 质 叙述 在 下 列 引 理 中 . 
引 理 ”对 于 转 定 的 0<r< 1, 函数 pr 是 园 上 的 一 个 概率 分 布 pr 的 密度 . 当 了 一 1 
时 ,分 布 P 趋 于 集中 在 原点 上 的 概率 分 布 . 
证 显然 六 > 0 从 (4.5) 显然 可 见 ，Pr 在 = 元 元 上 的 积分 等 于 1; 因为 对 于 
多 关 0,ein 的 积分 等 于 0. 对 于 5 < t < r，(4.7) 的 分 母 的 值 是 0 以 外 的 有 界 值 , 由 
此 可 推出 ,在 不 包含 原点 的 任 一 开 区 间 中 , 当 r 一 1 时 有 界 地 有 pr(t) 一 0， 因 此 
P. 有 一 个 集中 于 原点 上 的 极限 分 布 . > 
定理 1 一 个 周期 为 2n 的 连续 函数 是 一 个 特征 函数 , 当 且 仅 当 它 的 傅 里 叶 系 数 (4.2) 
满足 pk >0 和 %(0) =1. 在 这 种 情形 下 , yp 可 用 一 致 收敛 的 傅 里 叶 级 数 (4.1) 表示 . 


Pr(t) = 
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量 句 话说 , 为 使 具有 非 负 系数 px 的 形式 傅 里 时 级 数 收敛 于 一 个 连续 函数 , 当 
且 仅 当 并 pk < oo. 在 这 种 情形 下 (4.1) 成 立 . ] 
证 由 (4.2) 和 (4.5), (4.3) 中 的 函数 所 可 以 写成 形式 


#0= v0 -pr dat (4.8) 
右边 是 p 与 概率 分 布 P 的 卷 积 ,因此 我 们 知道 
fr(O) 一 2(6)，7 一 1 (4.9) 


此 外 , 如果 m 是 |p| 的 上 界 ,那么 根据 (4.8)， 
f= par sm (410) 


由 于 级 数 的 各 项 是 非 负 的 ， 所 以 令 > 一 1 可 得 并 9r < m. 因此 , pne" 一 致 收 
敛 . 从 (4.3) 显然 可 见 ， 态 (5) 趋 于 这 个 值 . 因此 ，(4.1) 成 立 , 这 就 完成 了 证 明 . > 
注意 , (4.9) 是 卷 积 收敛 性 质 的 一 个 直接 推论 ， 从 而 与 系数 pn 的 正 性 无 关 . 因 
此 ,作为 一 个 副产品 我 们 有 
定理 2? ”如果 p 是 连续 的 ， 且 有 周期 2r， 那么 (4.9) 对 5 一 致 地 成 立 ， 
(关于 向 不 连续 函数 的 推广 , 见 系 2 和 习题 6~ 习题 8). 
系 1 (此 耶 尔 (FEkijer)) 连 续 周期 函数 P 是 一 个 三 角 多 项 式 序列 的 一 致 极限 . 
换 句 话说 , 任 给 。 > 0, 存在 这 样 的 数 a_N,… ,an, 使 得 对 于 所 有 的 〈， 


N 
[sO0- 3 mne"|<e. (411) 
n=—N 
证 对 任意 的 和 0<r<l， 


N 
pO — 》 pnrmle™| < lp(O) -FO + D> lpnl -rin (4.12) 
n=-_N Inl>N 
我 们 可 以 选 出 如 此 接近 于 1 的 +, 以 致 于 对 所 有 的 《, 右边 第 一 项 < e/2. 选取 了 > 
后 , 我 们 可 以 选取 这 样 大 的 N, 使 (4.12) 中 最 后 一 个 级 数 之 和 < e/2. 于 是 (4.11) 
对 an = Jpnrinl 成 立 . p 
@ 这 个 定理 可 以 重新 氢 述 如 下 ， 一 个 连续 周期 函数 p 的 传 里 时 级 数 是 阿 贝尔 可 和 的 ， 其 和 为 p. 定 
理 (及 其 证 法 ) 同样 适用 于 其 他 可 和 性 方法 . 
费 耶 尔 (L。 Fejer) 在 发 散 级 数 似乎 是 很 神秘 的 时 候 ， 利 用 切 萨 罗 (Cesaro) 可 和 性 (见习 题 9) 


首先 发 现 了 上 述 现象 . 因此 ,这 个 发 现 是 一 个 变动 一 时 的 事情 ， 由 于 历史 的 原因 , 许多 书 中 仍 利用 
切 萨 罗 可 和 人性， 虽然 阿 贝尔 方法 更 加 方便 且 可 统一 证 明 . 
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下 列 结果 只 是 为 了 完整 起 见 而 叙述 的 . 它 实际 上 包含 在 19.6 节 引 理 1 中 . 
么 2 两 个 具有 相同 的 傅 里 叶 系数 的 可 积 周期 画 数 至 多 在 测度 为 0 的 集合 上 不 同 
( 即 它们 的 不 定 积分 是 相同 的 ). 
证 ”对 于 一 个 传 里 叶 系数 为 pn 的 可 积 周期 函数 p, 令 


#0)= lot) -voldt (413) 


这 个 $ 是 一 个 连续 周期 函数 , 分 部 积分 表明 对 于 n 了 0, 它 的 第 nn 个 伟 里 叶 系 数 等 
于 -ipn/n. 

关系 式 (4.9) 和 (4.3) 合 在 一 起 表明 , 一 个 连续 函数 y 被 它 的 傅 里 叶 系数 pn 唯 
一 确定 . 因此 , 满足 n 承 0 的 系数 pn( 除 一 加 法 常数 外 ) 确定 了 yp. 对 于 任意 一 个 可 
积 的 p, 由 此 可 推出 它 的 傅 里 叶 系数 确定 了 积分 $, 从 而 (除了 在 一 个 测度 为 0 的 
集合 之 外 ) 确定 了 y. > 
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在 本 节 中 , yp 表示 这 样 一 个 特征 函数 ,使 得 |p| 在 整个 直线 上 是 可 积 的 . 根据 
傅 里 叶 反 演 公式 15.3 节 (3.5), 这 蕴含 存在 一 个 连续 的 密度 f. 根据 15.4 节 的 黎 曼 - 
勒 贝 格 引 理 3, f 和 9 在 无 穷 远 处 都 等 于 0. 如 果 % 充分 快 地 趋 于 0, 那么 可 以 利用 
它 通 过 下 列 方法 构造 周期 函数 : 这 种 可 以 粗略 地 说 成 是 把 5 轴 绕 在 一 个 长 度 为 2 和 
的 圆周 上 . 新 的 函数 可 以 表示 成 形式 


4 
0) = > oC + 2kX). (5.1) 


(此 处 双重 无 穷 级 数 之 和 忆 X 。 ok 被 定义 为 im 忆 疙 _w ak, 如 果 这 个 极限 存在 的 
话 .) 在 收敛 的 情形 下 ,函数 显然 是 一 个 周期 为 2\ 的 周期 函数 . 具有 最 简单 概率 
形式 的 泊 松 求 和 公式 断言 ， 当 峭 连 续 时 ，u%(6)/W(0) 是 一 个 算术 概率 分 布 的 特征 画 
数 ， 此 分 布 在 点 nz/ 入 上 的 原子 的 质量 与 flnr/A) 成 比例 . (此 外 n= 0, 土 1, 士 2…). 
乍 一 看 来 , 这 个 结果 只 是 一 个 奇特 的 结果 , 但 是 它 包含 了 通信 理论 中 的 著名 抽样 定 
理 和 许多 相当 有 趣 的 特殊 情形 . 

泊 松 求 和 公式 了 假设 特征 函数 p 是 绝对 可 积 的 ， 从 而 相应 的 概率 密度 有 是 


* 本 节 讨论 一 个 重要 的 特殊 课题 . 在 后 面 用 不 到 它 ， 并 且 除 了 利用 19.4 节 定理 1 外 , 它 与 前 面 各 节 无 


关 -. 
@ 恒等式 (5.2) 通常 是 在 各 种 各 样 的 附加 条 件 下 证 实 的 . 对 了 的 正 性 的 系统 研究 使 我 们 的 简单 叙述 及 
其 大 大 简化 了 的 证 明成 为 可 能 . 关于 定理 及 其 证 明 的 变形 , 见习 题 12 和 习题 13. 
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连续 的 ,那么 
十 co 十 co 
DC+28N) = FD fnn/ Ne Ne, (5.2) 
只 要 左边 的 级 数 收 化 于 一 个 连续 函数 沙 . 
对 于 5 = 0, 这 昔 合 
ep(2KA) = (rw/A) fnr/ 汶 (5.3) 


是 一 个 正 数 4, 从 而 %(C)/4 是 一 个 特征 函数 . 
证 只 需 证 (5.2) 的 右边 是 左边 的 周期 函数 % 的 形式 傅 里 叶 级 数 , 即 


入 
畜 人 Oe ac = Rar). (64) 


事实 上 , 这 些 传 里 叶 系 数 是 非 负 的 ， 由 假设 儿 是 连续 的 . 因此 根据 上 节 定 理 1, 伟 
里 叶 级 数 趋 于 光 , 从 而 (5.2) 成 立 . 
东 的 级 数 (5.1) 的 第 大 项 对 (5.4) 左边 的 贡献 等 于 
(2k 二 1) 入 


入 
1: ) ep(C 十 2kA)e-intn/ Ad6 = 入 op(s)e-in(r/ ads (5.5) 
2 和 J/-a 2A J(2k-1)\ 


它 的 绝对 值 小 于 
(2k+1)A 
/ lp(s)las. (5.6) 


2k—1)X 

区 间 (2k 一 1) 和 < s < (2k 十 1) 和 履 盖 了 实 轴 但 互 不 相交 ， 从 而 把 (5.6) 的 数值 相 加 
得 到 |p| 的 积分 , 这 积分 是 有 限 的 . 因此 , 在 -N <k< N 上 求 (5.5) 的 和 , 并 令 
和 一 co, 我 们 根据 控制 收敛 性 得 到 


1 六 WOe-ineyAcac = 工 f+” Ce)e-in(s/N 
去 人 ,Oe d = 区 p(s)e™in(s/Neds. (5.7) 


根据 傅 里 叶 反 演 定理 ,右边 等 于 (x/ 和 )f(nx/), 这 就 完成 了 证 明 . > 
最 有 趣 的 特殊 情况 发 生 在 p 对 于 |(| > a 恒 等 于 0 的 时 候 , 其 中 a < 入. (5.1) 

中 的 无 穷 级 数 化 为 一 项 , % 就 是 P 的 周期 为 2A 的 周期 延 拓 . 于 是 (5.2) 成 立 . 在 

(5.3) 中 左边 化 为 1, 这 说 明 多 是 一 个 概率 分 布 的 特征 函数 . 因此 , 我 们 有 

系 ”如果 一 个 特征 函数 对 |C| > a 恒 等 于 0， 那 么 它 的 周期 为 2A > 2a 的 所 有 周期 

延 拓也 是 特征 函数 
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这 个 系 实际 上 比 通常 在 通信 工程 教科 书 中 所 述 的 “抽样 定理 ”稍微 深刻 点 ， 
抽样 定理 有 时 也 称 为 尼 奎 斯 特 (H. Nyquist) 定 理 或 香农 (C. Shannon) 定 理 . 

“抽样 定理 ” ”一 个 使 得 其 特征 函数 p 在 aya 外 等 于 0 的 概率 密度 了 被 什 
(ze/ 和 )f(nn/ 和 ) 唯一 确定 ,其 中 入 > a 是 任 一 固定 的 数 , n = 0, 土 1,…. (这 些 值 导 
出 一 个 这 样 的 概率 分 布 ， 其 特征 函数 是 p 的 周期 为 2 和 的 周期 延 拓 . ) 

例 (a) ”考虑 密度 f(z) = (1 - cosz)/(rz?)， 它 的 特征 函数 当 |C| < 1 时 等 于 
2(6) =1 一 |4l, 当 |4| > 1 时 等 于 0. 对 于 入 =1 和 (= 1, 注意 到 j(0) = 1/(2n), 我 
们 从 (5.3) 得 到 


Ls Ga 
2 B+ 


% 的 周期 为 2A = 2 的 周期 延 拓 的 图 像 是 15.2 节 的 图 15-2， 周 期 为 2A > 2 的 
延 拓 的 图 像 是 图 15-3. 
例 (b) ”关于 (5.2) 的 简单 例子 , 见习 题 11. 

在 类 似 的 情况 下 , 公式 (5.2) 照例 可 以 改写 成 似乎 更 一 般 的 形式 . 实际 上 ， 区 
(5.2) 应 用 于 密度 f(z + s), 我 们 得 到 泊 松 求 和 公式 的 另 一 形式 


十 co 十 oo 
Do + aNe tN = 区 2 了 (n+ejene/A (5.9) 
例 (c) 把 (5.9) 应 用 于 正 态 密度 , 只 利用 特殊 值 《= 入, 我 们 得 到 
十 oo 二 oo 
etCe+D cos(2k + 1)Xs = 3 Dn (+ + s). (5.10) 


这 是 9 函数 论 中 的 一 个 著名 公式 , 在 10.5 节 中 曾 用 更 初等 的 方法 证 明 过 . 事实 
通常 之 所 以 引入 不 必要 约 条 件 , 是 由 于 证 明 信 闲 于 标 闪 传 里 叶 理论 , 此 理论 名 咯 了 与 概率 论 有 密切 
关系 的 的 正 性 . 
@ f(z) 的 明显 表达 式 可 以 推导 如 下 . 对 于 |《| < 和, 我们 有 p(C) = VC)， 从 而 根据 伟 里 叶 反 演 公 趟 
f= 去 人 vee. 


纱 由 (5.2) 的 右边 给 出 , 利用 简单 的 积分 可 导出 最 后 的 公式 


jla) = 二 于 去 和 副 忆 4(n¥) ere Vera = 二 s(n) [a 


T— nx/A 


这 个 展开 式 有 时 称 为 “基本 级 数 " . 它 有 许多 应 用 [ 见 J. M. Whittaker, Interpolatory function 
theory，Cambridge Tracts No. 33，1935 中 的 定理 16。， 关 于 高 维 中 的 类 似 履 开 式 , 见 DD. P. 
Petersen and D. Middleton, Information and Control. vol.5(1962),pp. 279-323.} 
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上 , 关于 微分 表明 , 10.5 节 (5.8) 和 10.5 节 (5.9) 的 恒等式 等 价 于 具有 入 = (mr/a)VE 
和 s=z/Vvt 的 (5.10). 
例 (d) ”对 于 特征 函数 为 p(C) = elsl 的 密度 f(z) = 1(1 十 22)-!, 我 们 在 (5.2) 
中 令 5= 0 得 到 ， ， 

e+e- 和 下 入 

可 人 


这 是 双 曲 余 切 的 部 分 分 式 的 分 解 式 . 

例 (e) ”长 度 为 2r 的 圆周 上 的 密度 可 以 通过 把 实 轴 绕 到 圆周 上 得 到 ,这 已 在 28 
节 中 叙述 过 . 对 于 直线 上 的 一 个 给 定 的 密度 7， 在 圆 上 有 一 个 由 级 数 学 f(2rm 十 3) 
给 出 的 相应 密度 , 由 ¢ = 0 时 的 (5.9), 我 们 得 到 这 个 密度 的 一 个 用 原来 的 特征 函数 
表示 的 新 表达 式 . 在 f =n 的 特殊 情况 下 , 我 们 得 到 下 列 形式 的 单位 圆周 上 类 似 于 
正 态 密度 的 表达 式 : 


十 oo 十 oo 
高 em ( > 去 十 2nm?) = 去 2 cosns. (5.12) 
第 2 个 表达 式 显然 说 明 , 参数 为 如 和 刀 的 2 个 正 态 密度 的 卷 积 是 一 个 参数 为 刁 十 妈 
的 正 态 密度 . [a 
19.6 正定 序列 


本 节 讨 论 有 限 区 间 上 的 概率 分 布 .为 了 确定 起 见 ， 把 它 的 长 度 取 为 2r， 和 在 
19.4 节 中 一 样 ,我 们 把 区 间 的 两 个 端点 视 为 一 点 ， 并 把 这 个 区 间 看 成 是 单位 圆周 . 
因此 , 我 们 可 以 把 已 看 成 是 单位 国 周 上 的 概率 分 布 ， 并 把 它 的 傅 里 叶 系 数 定 义 为 


« 
一 it 加 Pe 
= Ff), k=0,+1,.…. (6.1) 


一 x 


Pk 


注意 ,Bk = wp-k. 现在 我 们 来 证 明 系 数 wx 唯一 地 确定 分 布 . 考虑 到 不 足 道 的 尺度 
变化 , 这 个 断言 等 价 于 如 下 的 断言 : 集中 于 二 NX 上 的 分 布 由 它 的 特征 函数 在 r/ 入 
的 倍数 上 的 值 p(nr/A) 唯一 地 确定 ， 这 个 断言 是 上 节 抽 样 定理 的 对 偶 定 理 . 按照 
该 定理 , 在 一 入 外 等 于 0 的 特征 函数 由 密度 的 值 f(nr/A) 唯一 确定 

定理 1 园 周 上 的 分 布 F 由 它 的 传 里 叶 条 数 pk 唯一 确定 . 

证 和 在 (4.3) 中 一 样 , 我 们 对 0<r<1 令 


4 
天 (= > on rml en. (6.2) 
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导致 (4.8) 的 简单 计算 说 明 , 现在 有 
frO= 人 pr 一 DEFfdt， (63) 


其 中 pr 表示 (4.7) 中 所 定义 的 泊 松 核 . 我 们 知道 , pr 是 一 个 密度 , 我 们 用 P. 表示 
相应 的 分 布 . 于 是 f+ 是 卷 积 P. 妇 F 的 密度 , 此 卷 积 当 7 一 1 时 趋 于 下, 因此 下 实 
际 上 可 利用 所 来 计算 . > 
引 理 1 设 {ypn} 是 任 一 有 界 复 数 序列 . 为 使 在 国 周 上 存在 一 个 傅 里 叶 系 数 为 pn 
的 测度 玉 ， 当 且 仅 当 对 于 每 个 + < 1, (6.2) 所 确定 的 函数 fi 是 非 负 的 . 

证 由 (6.3) 和 pr 的 严格 正 性 , 必要 性 是 显然 的 . 用 e-i* 乘 以 (6.2) 并 积分 可 得 


peered. (6 


对 于 特殊 值 E = 0, 可 见 po > 0. 不 失 一 般 性 , 我 们 可 以 假设 wo = 1/(2m). 利用 这 

个 正规 化 常数 , 刻 是 圆周 上 一 个 概率 分 布 F, 的 密度 , (6.5) 表明 pkrll 是 F 的 第 

个 傅 里 叶 系数 . 根据 选择 定理 , 可 以 令 7 以 这 种 方式 趋 于 1, 使 得 F 收敛 于 一 个 

概率 分 布 FP. 由 (6.5) 显然 可 见 px 满足 (6.1), 这 就 完成 了 证 明 . > 
注意 ,这 个 引 理 比 19.4 节 系 2 强 . 我 们 如 同 在 19.2 节 中 那样 进行 , 推导 一 个 

对 应 于 波 严 纳 定理 的 定理 , 这 应 归功 于 赫 格 洛 获 (G. Herglotz). 

定义 ” 称 一 个 序列 {pk} 为 正定 的 ,如 果 对 于 有 限 多 个 复数 Zz1，,… ,zn 的 每 种 选择 ， 


D pinzjzk >0. (6.5) 
Dk 
引 理 2 。 如果 {pk} 是 正定 的 ,那么 po > 0, 且 |pn| < po. 
证 应 用 19.2 节 引 理 3 的 证 明 (又 见习 题 14. ) 
定理 2 为 使 序列 {pn} 是 国 周 上 一 个 测度 五 的 傅 里 叶 系数 ， 当 且 仅 当 它 是 正定 
的 . 
证 (a) 通过 简单 的 计算 可 以 证 明 , 如果 wx 由 (6.1) 给 出 , 那么 (6.5) 的 左边 等 于 
(1/2n)| 芝 eVtzj|? 关于 下 的 积分 . 因此 , 条 件 是 必要 的 . 
(b) 为 了 证 明 充分 性 , 对 大 > 0 选取 zx = rteitt, 对 大 < 0 选取 zx = 0. 对 于 这 
个 序列 , (6.5) 中 的 和 旺 形式 


bp bp pj- ritkeiG—h)t 一 区 pn eint > rlnl+2k 
k= 


k=0 m= 一 oo 


了 
己 


= (1 二 rm) 区 orlnleint (6.6) 
-oe 


570 第 19 章 调和 分 析 


根据 定义 (6.2)， 最 后 一 个 和 等 于 f(t). 固然， 不 等 式 (6.5) 只 是 对 有 限 序列 {zn} 

而 假设 的 , 但 是 简单 的 取 极限 表明 , 它 对 我 们 的 无 穷 序列 也 成 立 , 于 是 我 们 证 明了 

方 人 > 0. 根据 引 理 1, 这 蕴含 pn 确实 是 单位 圆周 上 一 个 测度 的 传 里 叶 系数 .。 > 
由 这 个 准则 我 们 推导 一 个 类 似 于 19.3 节 定 理 的 

定理 3 设 {Xn} 是 定义 于 某 一 概率 空间 上 的 一 列 随 机 变量 ， 使 得 


pn 一 了 E(Xn+y 双 0) (6.7) 


与 v 无 关 , 那么 在 国 周 一 元 元 上 存在 唯一 的 一 个 测度 RR, 使 得 pn 是 它 的 第 多 个 伟 
里 叶 系 数 . 
证 显然 ， 
BD pirzize = DE(XjziXkzk) = El 人 DXaP), (6.8) 

这 说 明 序列 {pn} 是 正定 的 . p 

其 道 也 成 立 : 对 于 圆周 上 任 一 测度 , 存在 一 个 序列 {Xn}, 使 得 (6.7) 是 它 的 健 
里 叶 系数 , 这 可 由 19.3 节 末 尾 所 用 的 构造 看 出 , 但 是 我 们 将 在 19.8 节 回 过 头 来 讨 
论 这 个 问题 . 
例 (a)” 设 X。 是 独立 同 分 布 变量 ,满足 E(Xn) = / 和 Var(Xn) = o2， 那么 
po = 02 十 /2， 且 对 于 此 关 0,pk = pi2. 谱 测 度 是 在 原点 上 具有 重量 /2 的 原子 与 密 
度 为 2/(2r) 的 均匀 分 布 之 和 . 
例 (b) ”19.4 节 中 的 构造 说 明 , 对 固定 的 +< 1 和 6, 由 pr(t 一 9) 定义 的 密度 的 傅 
里 叶 系 数 为 pn = rnlein4. 
例 (c) ”马尔 可 夫 过 程 . 在 3.8 节 中 曾 证 明 ， 实 正 态 变量 的 平稳 马尔 可 夫 序 列 具 有 
形 如 pn = ri"| 的 协 方差 , 其 中 0 < r < 1. 类 似 的 论证 表明 , 任意 复 平稳 马尔 可 夫 
序列 的 协 方差 具有 rinleine 的 形式 . 当 r < 1 时 , 谱 测度 有 密度 pr(t 一 9); 当 7=1 
时 , 它 集 中 于 点 0 上 . > 


19.7 IL? 理 论 


为 了 概率 论 的 目的 , 需要 把 特征 函数 作为 测度 的 变换 而 引入 , 但 是 研究 调和 分 
析 的 其 他 方法 也 是 同样 自然 的 . 特别 ,可 以 定义 函数 (而 不 是 测度 ) 的 傅 里 叶 变 换 ， 
由 傅 里 叶 反 演 公式 ， 似 乎 可 以 用 这 种 方法 获得 较 好 的 对 称 性 . 事实 上 ， 当 只 讨论 平 
方 可 积 函数 时 ,得 到 的 结果 最 简单 最 优美 . 我 们 之 所 以 研究 这 个 理论 , 是 由 于 它 本 
身 的 重要 性 ,也 是 因为 它 被 广泛 地 应 用 于 随机 过 程 的 调和 分 析 - 

对 于 实 变量 z 的 一 个 复 值 函数 %, 我们 把 范 数 ||uli > 0 定义 为 


+oo 
l= 人 wapPar (1D) 
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我 们 将 把 两 个 只 在 一 个 测度 为 0 的 全 合 上 不 同 的 函数 看 作 是 恒 等 的 . ( 换 句 话说 , 我 
们 实际 上 讨论 等 价 函 数 类 , 但 是 我 们 仍 沿用 通常 的 语言 ,这 并 无 害处 .) 利用 这 个 
约定 ， 为 使 llu|| = 0， 当 和 且 仅 当 v = 0. 用 到 表示 所 有 的 范 数 为 有 限 的 函数 类 . 
L2 中 两 个 函数 u,v 的 距离 是 以 ||w 一 vl| 定义 的 . 按 这 个 定义 , L? 是 一 个 度量 空间 ， 
称 L? 中 的 函数 un 的 序列 依 这 个 度量 收敛 于 w， 当 且 仅 当 llun 一 吉 | 一 0. 这 种 收 
伍 9 将 表示 为 4 =1im.un 或 un -三 u. 它 也 称 为 均 方 “收敛 ”. 称 {wn} 是 一 个 柯 西 
序列 , 当 且 仅 当 
ljun 一 am 一 0， 当 mm 一 oo 时 . 

我 们 不 加 证 明 地 指出 , 在 每 个 柯 西 序列 {un} 都 有 唯一 的 极限 ve L? 的 意义 上 , 度 
量 空间 L? 是 完备 的 . 
例 (a) ?中 的 函数 在 每 个 有 限 区 间 上 是 可 积 的 ， 因 为 在 所 有 的 点 上 |u(z)| < 
lu(z)| + 1. 这 个 陈述 对 无 限 区 间 不 成 立 , 因为 (1+ |z|)-! 在 L? 中 但 不 可 积 . 
例 (b) ”每 个 有 界 可 积 函 数 都 属于 L?, 因为 |u| < M 蕴含 lul? < Mlul. 这 个 陈述 
对 无 界 函数 不 成 立 , 因为 x- 在 DI 上 可 积 , 但 不 平方 可 积 . [5 

两 个 函数 的 内 积 (u,v) 定义 为 


仿 可 三 / a (7 
它 对 z 中 每 一 对 函数 都 存在 ,因为 根据 施 瓦 效 不 等 式 
i 
而 le < lull (73) 


特别 (wu) = |lull?. 利用 内 积 的 这 种 定义 ， 罗 就 变 成 了 一 个 希 尔 伯 特 空间 ， 内 积 
(7.2) 与 两 个 期 望 为 0 的 随机 变量 的 协 方差 的 相似 性 是 很 明显 的 , 我 们 以 后 将 利用 
这 一 点 . 

在 作 了 这 些 准备 之 后 , 我 们 转向 我 们 的 主要 目标 ， 即 定义 形 如 


ao= 志 A ur]eiczdz (7.4) 


的 变换 . 当 4 是 一 个 概率 密度 时 , 飞 与 特征 函数 只 差 一 个 因子 V27. 为 了 避免 混淆， 
把 立 称 为 忆 的 普 表 谢 雷 变换 . 定义 (7.4) 只 适用 于 可 积 函 数 v， 但 我 们 将 把 它 扩张 
到 整个 L2. 下 例 可 以 帮助 我 们 容易 理解 这 种 手续 以 及 广义 变换 的 性 质 . 
@ un 处 处 收敛 于 极限 v。 并 不 蕴含 un :ms u[ 见 4.2 节 例 (e)]. 但 如 果 已 知 u 二 li.m. un 也 存在 , 那 
么 4 二 v. 事实 上 , 根据 法 图 引 理 ， 


wa -sjPazsim 太 ” lo-wmGPaz=a 
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例 (c) I? 中 任 一 函数 4 在 有 限 区 间 上 是 可 积 的 , 从 而 我 们 可 以 定义 截 尾 变换 
LW) )=-- 碟 人 u(r)eXrdz. 


注意 , al") 是 函数 ul" 的 普 朗 谢 雷 变换 , 此 函数 是 这 样 定义 的 : 当 |z| <n 时 , u" 
(z) = u(z); 当 |z| nn 时, u 中 (z) = 0. 当 n 一 oo 时, 对 于 任 一 特殊 值 Cm)(C) 
都 不 一 定 收敛 , 但 是 我 们 将 证 明 {2"} 是 一 个 柯 西 序列 , 从 而 存在 L? 中 的 元 素 也 
使 得 生 =1ii.m.ii(. 我 们 将 定义 这 个 主 为 以 的 普 朗 谢 雷 变换 ， 显然 (7.4) 中 的 积分 
不 一 定 收敛 . 截 尾 的 特殊 方式 不 起 作用 , 取 平 均 收敛 于 v 的 任 一 其 他 可 积 函 数 序列 
wm) 都 得 到 同一 立 . 

例 (d) ”如 果 忆 表示 -LI 上 的 均匀 密度 , 那么 它 的 普 朗 谢 雷 变换 = sinz/(zV2m) 
是 不 可 积 的 . 但 是 区 属于 L?, 我 们 将 看 到 它 的 普 朗 谢 雷 变换 和 原来 的 密度 4 重合 . 
这 样 我 们 就 把 15.3 节 (3.5) i eh ni ea 


”我 们 着 手 米 定义 一 般 的 普 朗 谢 雷 变换 .对 任 一 可 各 西数 变换 名 由 (7 4 证 
义 这 样 的 卫 是 连续 的 (根据 控制 收 全 原理 )， 且 iil < 去 三” laz. 一 般 说 来 , 


是 不 可 积 的 . 为 了 简单 起 见 ， 我 们 约定 称 函 数 v 为 “ 地 如 果 它 是 有 界 连续 的 ， 
且 立 和 慷 都 是 可 积 的 . 于 是 立 也 是 好 的 , 4 和 立 都 属于 三 [ 见 例 (b)]. 
首先 我 们 证 明 反 演 公式 


= 起 /Oa Ca 

对 好 的 函数 成 立 。 我 们 重 述 证 明 15.3 节 中 的 反 演 公式 时 所 用 的 论证 ， 用 
(1/V 玩 ) et-ie 5 乘 以 (7.4) 并 积分 ,得 到 

渗 寺 广 (Ce dc = 太 uo)n(: 和 2) 衬 ， (7.6) 


其 中 n 表示 标准 正 态 密度 . 当 < 一 0 时 , 左边 的 积分 趋 于 (7.5) 中 的 积分 ， 而 右边 
的 卷 积 趋 于 ult). 因此 , (7.5) 对 好 的 函数 成 立 . 
设 v 是 另 一 好 的 函数 . 用 共 撤 函数 5 乘 以 (7.5), 在 -co < 上 < oo 上 积分 . 左 
边 等 于 内 积 (w,v), 交换 积 分 次 序 后 , 右边 化 为 (&, 们 ). 因此 , 好 的 函数 满足 恒等式 
(2,0) = (wu, 5), (7.7) 
此 式 称 为 L? 的 巾 塞 瓦尔 关系 式 . 对 于 v= 4, 它 化 为 


lall = llull. (7.8) 
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由 此 推出 两 个 变换 立 和 详 的 距离 与 “和 ~ 之 间 的 距离 相同 . 我 们 把 这 点 说 成 : 在 
好 的 函数 中 , 普 朗 谢 雷 变换 是 一 个 等 距 变换 . 

其 次 我 们 证 明 , 关系 式 (7.7) 和 (7.8) 对 属于 L? 的 任意 可 积 函 数 v 和 v 也 成 
立 . 变换 不 一 定 是 可 积 的 , 但 (7.8) 蕴含 它们 属于 L?[ 比 较 例 子 (a) 和 (b)]. 

首先 我 们 注意 到 , 具有 两 个 可 积 导数 的 可 积 函 数 ww 一 定 是 好 的 函数 . 实际 上 ， 
从 15.4 节 的 引 理 4 我 们 知道 , 当 《 一 +ee 时 ,|W(4)| = o(6”), 因此 圳 一定 是 可 积 
的 . 

现在 假设 4 是 有 界 可 积 的 (从 而 属于 L?). 根据 4.2 节 的 平均 逼近 定理 ， 可 以 
找 出 一 列 好 的 函数 un, 使 得 


六 i eT (7.9) 


如 果 lu| < M， 那么 un 可 以 这 样 选取 , 使 得 也 有 lun| < M. 于 是 w 平均 收敛 于 
u， 因为 |lu 一 unll? 不 能 大 于 (7.9) 中 的 积分 的 2M 倍 . 因此 , 好 的 函数 的 等 距 性 
(7.8) 保证 {an} 是 一 个 柯 西 序列 . 另 一 方面 ,对 于 每 个 固定 的 6,in(C) 一 tO), 因 
为 Ii(6) 一 iin(0)| 不 能 大 于 (7.9) 中 的 积分 . 但 是 , 正如 本 节 第 1 个 脚注 所 指出 的 那 
样 , 柯 西 序列 的 元 素 的 处 处 收敛 保证 序列 本 身 的 收敛 , 因此 我 们 有 


= 1im. fn. (7.10) 


把 (7.7) 应 用 于 对 偶 un 和 v, 并 令 n 一 co, 我 们 看 到 , 当 愉 有 界 可 积 , 而 v 是 好 函 
数 时 ，(7.7) 仍 成 立 . 再 取 一 次 这 样 的 极限 ， 可 以 证 明 (7.7) 对 任何 一 对 有 界 可 积 函 
数 也 成 立 . 

剩 下 的 是 证 明 (7.7) 对 无 界 函数 v 和 vw 也 成 立 ， 只 要 它们 是 可 积 的 且 属 于 L?. 
为 了 证 明 这 一 点 , 我 们 重复 前 面 的 论证 , 但 有 一 个 改变 , 即 副 近 函 数 un 现在 是 利 
用 截 尾 定义 : 如 果 lu(z)| < n, 那么 un(z) = ulz). 对 于 所 有 其 他 的 z,un(z) = 0. 于 
是 (7.10) 成 立 , 并 且 wn - 玉 u, 证 明 不 需要 做 其 他 的 改变 就 可 应 用 . 

我 们 现在 可 以 进行 最 后 一 步 了 ， 即 把 普 朗 谢 雷 变换 的 定义 推广 到 整个 L? 上 . 
正如 在 例 (c) 中 所 看 到 的 那样 ，L? 中 的 每 个 函数 是 一 个 由 L? 中 可 积 函 数 un 组 成 
的 柯 西 序列 的 极限 . 我 们 刚才 证 明了 ，(7.4) 定义 的 变换 io 形成 一 个 柯 西 序列 ， 我 
们 现在 把 立定 义 为 这 个 柯 西 序列 的 极限 . 因为 两 个 柯 西 序列 可 以 结合 成 一 个 序列 ， 
所 以 极限 立 与 近似 序列 {un} 的 选择 无 关 . 而 且 , 如 果 "是 可 积 的 ,那么 我 们 可 对 
所 有 的 n 取 un = u， 于 是 可 以 看 出 , 当 4 可 积 时 , 新 的 定义 和 (7.4) 一 致 . 可 以 总 
结 如 下 : 

普 妥 谢 雷 变换 去 对 L? 中 的 每 个 都 有 定义 ; 对 于 可 积 的 u， 它 由 (7.4) 给 出 ， 
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一 般 说 来 是 由 下 述 法 则 给 出 的 : 
如 果 怀 = Limun， 那么 全 = 1im.iin. (7.11) 


帕 塞 瓦尔 关系 式 (7.7) 和 等 距 性 (7.8) 对 一 般 情形 也 成 立 . 映射 筷 一 生 是 一 一 的 ,让 
的 变换 由 u( 一 z) 给 出 . 

上 一 断言 是 传 里 叶 反 演 公 式 (7.5) 的 一 个 变形 , 在 4 或 名 不 可 积 时 可 以 应 用 
它 , 因此 (7.4) 和 (7.5) 中 的 积分 不 是 在 普通 意义 上 定义 的 . 在 原来 的 函数 和 它们 的 
变换 之 间 的 关系 中 的 完全 对 称 性 是 希 尔 伯 特 空间 中 传 里 叶 理 论 的 主要 优点 . 

上 述 理 论 被 广泛 地 应 用 于 预报 理论 . 作为 概率 应 用 的 一 个 例子 , 我 们 叙述 一 个 
通常 归功 于 A. 辛 钦 的 准则 , 虽然 它 出 现在 N. 维 纳 的 经 典 著作 中 . 由 于 历史 传统 的 
原因 ， 即 使 较 新 的 教科 书 也 未 能 注意 到 它 实际 上 只 是 帕 塞 瓦 尔 公 式 的 一 个 特殊 情 
形 , 不 需要 复杂 的 证 明 . 

维 纳 - 辛 钦 准 则 为 使 函数 p 是 一 个 概率 密度 的 特征 函数 ， 当 且 仅 当 存 在 这 样 
的 函数 4, 使 得 ul? 二 1, 且 


+o0 
vp(N) = 了 azjac 十 Ndz. (7.12) 


在 这 种 情形 下 , f= 上 |2. 
证 ”对 于 固定 的 入 , 令 v(z) = wu(z + 入 . 于 是 (5) = 让 60)e-iX. 帕 塞 巨 尔 关系 式 
(7.7) 化 成 
+o0 +o0 
上 la(z)Peirdz = / au(z)u(z + A)dz, (7.13) 


因为 |lal| = 1, 所 以 左边 是 一 个 概率 密度 的 特征 函数 . 反之 , 给 定 一 个 概率 密度 了 
可 以 选 出 一 个 ,使 得 了 = 他 |?， 于 是 (7.12) 成 立 . u 的 选择 不 是 唯一 的 . 全 
中 的 一 个 问题 讨论 选取 在 一 条 射线 上 等 于 0 的 的 可 能 性 )) 

传 里 叶 积分 的 Z2 理论 可 以 搬 到 传 里 叶 级 数 上 去 . 现在 数 是 定义 在 加 同上 的 
但 是 对 于 传 里 叶 (或 普 朗 谢 雷 ) 变换 , 有 相应 的 传 里 叶 系数 序列 . 除了 这 个 形式 上 的 
差别 外 , 两 个 理论 是 平行 的 ,只 要 作 简单 扼要 的 说 明 就 够 了 . 

对 于 我 们 的 2， 现在 有 一 个 由 圆周 上 平方 可 积 函 数组 成 的 希 尔 伯 特 空间 
2(m) 与 之 对 应 . 于 是 范 数 和 内 积 可 定义 为 


名 
uP= 去 /woe 


(u,v) = 去 上 au(z)ju(z)dz， (7.14) 
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积分 区 域 是 整个 圆周 (把 点 -x 和 视 为 一 点 ). 下 列 形式 的 有 限 三 角 多 项 式 起 着 
“好 的 函数 ”的 作用 : 


uz) = Dune™”, (7.15) 
它 的 傅 里 叶 系 数 un 为 
tm 一 去 au(z)e-imzdz. (7.16) 


对 一 个 好 的 函数 ， 有 其 系数 组 成 的 有 限 序列 {un} 与 之 对 应 ， 反 之， 对 于 每 个 有 
限 复数 序列 ， 有 一 个 好 的 函数 与 之 对 应 . 关系 式 (7.16) 和 (7.15) 定义 傅 里 叶 变 换 
匀 = {un} 及 其 逆 变 换 . 形式 上 的 乘积 和 积分 表明 ,对 于 两 个 好 的 函数 ， 


去 大 u(z)u(zjdz = 》 urd. (7.17) 


我 们 现在 考虑 由 无 穷 序列 立 = {un},0 = {vn} 等 组 成 的 希 尔 伯 特 空间 5, 其 范 数 和 
内 积 定义 为 

al = Dhl (dD) = DunD. (7.18) 
这 个 空间 与 Z2 有 类 似 的 性 质 . 特别 ， 有限 序 列 在 整个 空间 中 是 稠密 的 . 由 此 推出 ， 
在 与 中 的 序列 二 = {un} 与 Z2 (元 右 的 函数 w 之 间 存 在 一 个 一 一 对 应 , 对 于 每 个 
使 于 |un|? < oo 的 序列 {un}， 存 在 一 个 传 里 叶 系数 为 un 的 平方 可 积 画 数 与 之 对 
应 , 反之 亦 然 . 映射 u 一 {us} 仍 是 一 个 等 距 变换 ， 巾 塞 拟 尔 关系 式 (Wu) 二 (友人 
成 立 , 传 里 时 级 数 不 一 定 收敛 , 但 由 部 分 和 中 wkei' 形成 的 连续 函数 列 按 2 度量 


收敛 于 u. 同样 的 陈述 对 其 他 连续 通 近 也 成 立 . 因此 , 当 7 一 1 时 , 于 ukrlkleiks 趋 
于 ww 
如 上 所 述 , 我们 考虑 由 


ls vf 
区 由 wu(z)z(z)erinzdz = > km (7.19) 
表示 的 帕 塞 瓦尔 关系 式 的 特殊 情形 . 取 v = ww 我 们 又 看 到 ,序列 {pn} 是 一 元 元 上 
一 个 概率 密度 的 傅 里 叶 系 数 ， 当 且 仅 当 它 具有 如 下 形式 : 
or 一》 uktnk， 其 中 》 lukP=1. (7.20) 
这 种 形式 的 协 方差 曾 出 现在 3.7 节 (7.4) 中 (也 见习 题 17. ) 
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19.8 ”随机 过 程 与 随机 积分 


为 了 记号 简单 起 见 , 在 本 节 中 我 们 讨论 随机 变量 序列 {Xm}, 但 是 很 明显 , 这 里 
的 叙述 也 适用 连续 时 间 参 数 的 随机 变量 族 ， 所 不 同 的 只 是 谱 测 度 不 局 限于 有 限 区 
间 ， 且 级 数 被 积分 代替 . 
设 {Xn} 是 定义 于 某 一 概率 空间 6 且 有 有 限 二 阶 甜 的 二 重 无 限 随机 变 基 序列 ， 
假设 序列 是 严格 平稳 的 , 即 
了 E(Xn+vXv) = pn 


与 无关. 根据 19.6 节 定理 3, 在 圆周 -x,x 上 存在 唯一 的 一 个 测度 R, 使 得 


i 1 一 inz i 
= 示人 Rd n= 0 (8.1) 


pn 
我 们 现在 来 详细 令 述 19.3 节 所 提 到 的 那个 想法 : 具有 谱 测 度 RR 的 圆周 可 以 用 来 构 
造 随机 过 程 {Xn} 的 一 个 具体 表达 式 (至 少 对 于 所 有 只 依赖 于 二 阶 窍 的 性 质 ). 叙述 
利用 了 希 尔 伯 特 空间 的 术语 , 我 们 将 考虑 两 个 希 尔 伯 特 空间 . 

(a) 空间 I. 通过 逐 字 重复 19.7 节 中 L? 的 定义 (所 不 同 的 只 是 在 这 里 要 把 直 
线 换 成 圆周 一 zt, 把 勒 贝 格 测度 换 为 测度 R.), 我 们 可 以 构造 一 个 圆周 上 的 函数 
空间 . 圆周 上 ( 复 值 ) 函数 的 范 数 和 内 积 可 以 分 别 定义 为 


uiP= 支 三 wopPatdzy， oo = 去 [uaatas). (82) 


现在 基本 的 约定 是 ， 如 果 两 个 函数 只 在 一 个 忌 测度 为 0 的 集合 上 不 同 ， 那么 这 两 
个 画 数 被 看 作 是 恒 等 的 . 这 个 约定 的 效果 很 大 . 如 果 RR 集中 于 两 点 0 和 1 上 , 那 
么 “函数 ”( 在 我 们 的 意义 下 ) 被 它 在 这 两 点 上 的 值 完全 确定 . 例如 ,sin nrz 是 零 函 
数 . 即使 在 这 样 极 端的 情形 下 , 利用 通常 的 连续 函数 的 公式 以 及 参考 它们 的 图 形 也 
是 无 害 的 . 因此 , 引用 “阶梯 函数 ”总 有 意义 , 并 且 简 化 了 语言 

硕 尔 伯 特 室 间 [名 是 由 圆周 上 所 有 具有 有 限 范 数 的 函数 组 成 的 ， 如 果 ||un 一 
ull 一 0， 那 么 称 序列 {wn} 依 我 们 的 度量 收敛 于 vw( 或 者 关于 质量 分 布 尺 均 方 收敛 
于 . 希 尔 伯 特 空间 成 是 一 个 完备 度量 空间 , 连续 函数 在 其 中 是 稠密 的 . (关于 定 
义 , 见 19.7 节 . ) 

(b) 由 {Xn} 张 成 的 希 尔 伯 特 空间 呈 . 用 50 表示 定义 在 任 一 固定 的 样本 空间 
上 的 具有 有 限 二 阶 和 矩 的 随机 变量 所 成 的 族 . 根据 施 瓦 效 不 等 式 , E(UT) 对 任意 一 对 . 
这 样 的 变量 都 存在 , 利用 基本 概率 测度 代替 R, 把 (8.2) 从 圆周 推广 到 样本 空间 6 
是 很 自然 的 . 因此 , 我 们 又 约定 把 两 个 只 在 一 概率 为 0 的 集合 上 不 同 的 随机 变量 视 
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为 相同 的 , 并 且 E(UT) 定义 内 积 ; U 的 范 数 是 E(UV) 的 正 根 . 利用 这 些 约定 , 5 
也 是 一 个 希 尔 伯 特 空间 ; 它 是 一 个 完备 度量 空间 , 称 随机 变量 U 的 序列 在 其 中 收 
敛 于 局 如 果 ED 一 UJ) 一 0. 

在 讨论 序列 {Xn} 时 ,我 们 通常 只 对 这 样 的 随机 变 基 感 兴趣 , 这 些 变量 是 Xk 
的 函数 , 在 许多 方面 我 们 只 考虑 线性 函数 . 这 把 讨论 局 限于 有 限 线性 组 合 并 akXk 
和 这 种 有 限 线性 组 合 的 序列 的 极限 . 这 种 类 型 的 随机 变量 构成 5o 的 一 个 子 空间 5， 
称 为 由 Xi 张 成 的 希 尔 伯 特 空间 . 其 中 的 内 积 、 范 数 和 收敛 完全 像 上 面 那样 定义 , 与 
是 一 个 完备 度量 空间 . 

现在 期 望 E(X,) 一 点 也 不 起 作用 , 但 是 因为 “ 协 方差 ” 似乎 比 “ 内 积 ” 好 昕 ， 
所 以 我 们 引入 通常 的 约定 E(Xn) = 0. 这 个 约定 的 唯一 目的 是 把 pn 当 作 协 方差 ， 
如 果 我 们 约定 称 E(XY) 为 X 和 了 的 协 方差 , 那么 就 不 需要 中 心 常数 了 . 我 们 现在 
到 达 了 一 个 关键 的 地 方 , 即 直 观 上 很 简单 的 空间 7 可 作为 与 的 具体 模型 . 实际 上 ， 
根据 定义 , 任意 一 对 变量 的 协 方差 pi-k = cov(Xi, Xk) 等 于 I 中 两 个 函数 es 和 
eikr 的 内 积 . 由 此 推出 , 两 个 有 限 线性 组 合 U = 于 ajXy 和 VV = 于 bXi 的 协 方差 
等 于 相应 的 线性 组 合 4= 并 ojeliz 和 v= 于 peits 的 内 积 . 根据 这 两 个 空间 中 收 伊 
的 定义 ， 可 以 把 这 个 映射 推广 到 所 有 的 变节 上 去 . 因此 ， 我 们 有 一 个 重要 的 结果 ， 
映射 Xk 一 ， elikz 在 尺 中 的 随机 变量 与 [名 的 函数 之 问 导出 一 个 一 一 对 应 ， 这 个 
对 应 保持 内 积 和 范 数 (从 而 保持 极限 ) 不 变 . 利用 专门 的 术语 来 说 , 就 是 这 两 个 空间 
是 等 距 的 .9 我 们 现在 研究 5 和 {Xn} 时 , 可 以 只 明显 涉及 具体 空间 Z. 这 个 程序 
除了 可 以 帮助 直观 理解 外 , 还 具有 理论 上 的 优点 . 因为 圆周 上 的 函数 是 常见 的 研究 
对 象 , 所 以 比较 容易 发 现 [中 具有 所 需要 的 谱 性 质 的 函数 序列 {uto}. 对 于 wm ， 
在 原来 的 样本 空间 S 中 有 一 个 随机 变量 Zn 与 之 对 应 ; 如 果 ul") 的 傅 里 叶 系数 是 
已 知 的 ,那么 可 以 把 Zn 明显 地 表示 为 变量 Xx 的 有 限 线性 组 合 的 极限 . 如果 Xx 
的 联合 分 布 是 正 态 的 , 那么 Zr 的 联合 分 布 也 是 正 态 的 . 

实际 上 这 个 程序 通常 可 以 倒转 过 来 . 给 定 一 个 复杂 的 过 程 {Xk}， 我 们 的 目的 
是 用 一 个 简单 过 程 的 变 基 Z 表示 它 . 达到 这 个 目的 的 实际 方法 是 在 I 中 进行 ， 
而 不 是 在 原来 的 空间 中 进行 . 用 一 些 例子 比 理论 的 论述 更 能 说 明 这 一 点 . 


@ 熟悉 希 尔 伯 特 空间 理论 的 读者 应 注意 到 与 酉 算 子 的 标准 谱 定 理 的 关系 . 把 男 以 Xn 一 Xn+1 的 
方式 映射 到 自身 的 线性 算 子 称 为 转移 算 子 , 工 乱 可 以 作为 这 样 一 种 模型 使 得 在 其 中 这 个 转移 算 子 
的 运算 变 成 用 e~* 相 乘 . 反之 ,在 希 尔 伯 特 空间 称 o 中 给 定 任 一 西 算 子 T 和 任 一 元 素 Xo € 分 0， 
则 可 以 把 元 率 Xn = T"Xo 的 序列 看 作 平稳 序列 , 把 了 看 作 由 这 个 序列 生成 的 子 空间 邹 上 的 转 
移 算 子 . 如 果 Xo 可 以 这 样 选取 , 使 得 血 = 多 a, 那么 我 们 就 得 到 了 人 的 标准 谱 定 理 (所 不 同 的 是 ， 
我 们 有 一 个 以 Xo 的 选择 为 基础 的 “恒等式 分 解 ” 的 具体 表达 式 ). 如 果 务 C 多 0, 那么 多 a 是 两 个 
不 变 子 空间 的 直 和 ， 上 述说 明 适 用 于 这 两 个 子 空间 的 每 一 个 .利用 记号 的 简单 改变 , 我 们 就 可 推导 
出 一 般 的 谱 表达 式 (包括 谱 的 相 重 性 理论 . ) 
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例 (a) 用 独立 变量 表示 {Xn} 的 表达 式 . 和 在 别处 一 样 , 在 本 节 中 {Xn} 表示 一 
个 给 定 的 过 程 , 它 的 协 方差 为 pn, 谱 测 度 已 由 (8.1) 所 定义 . 在 我 们 的 映射 中 ,Xn 
对 应 于 圆周 上 的 函数 e"*. 我 们 现在 证 明 ， 对 于 某 些 函数 vy, 对 应 于 e””/Y(z) 的 
随机 变 基 是 不 相关 的 . 我 们 只 考虑 谱 测度 R 有 一 个 普通 密度 7 的 情形 . 为 了 简单 起 
见 2 我 们 假设 > 是 严格 正 的 且 连 续 的 . 选择 这 样 一 个 函数 7, 使 得 


Pa)P 一 r(z). (8.3) 


正如 在 19.7 节 所 说 明 的 那样 ,Y 的 健 里 叶 级 数 依 L? 范 数 收敛 . 用 ?yx 表示 7 的 傅 
里 叶 系 数 , 我 人 有 并 |yxl? < co. 根据 帕 塞 瓦尔 关系 式 (7.20)， 
+o0 
pn = 》 rtnTk- (8.4) 


现在 考虑 由 下 式 定义 的 函数 ut" 的 二 重 无 穷 序 列 ， 


einz 


3(z) 


tn)(z) = (8.5) 


代入 (8.2)， 可 见 对 于 站 天 mw， 
lu = 1， (vu) = 0. (8.6) 


对 相应 于 函数 u(" 的 随机 变 其 Zn, 这 蕴含 它们 是 不 相关 的 , 且 方 差 为 1. 特别 地 ， 
如 果 Xk 是 正 态 的 ， 那么 Zi 是 相互 独立 的 . 

有 趣 的 是 , 变 其 Xi 张 成 的 空间 包含 一 个 不 相关 的 平稳 序列 {Zn}. 用 Xx 表示 
Zn 的 明显 表达 式 可 以 从 函数 vt 的 傅 里 叶 展 开 式 获得 , 但 是 朝 相反 方向 进行 是 更 
有 益 的 : 因为 {Zn} 的 构造 比 {Xk} 的 构造 简单 ， 所 以 最 好 利用 Zn 来 表示 Xk. 现 
在 有 


N em HN 
nu("tk) (z) = meinz. 8.7 
0 Ww 


右边 的 和 是 Y 的 伟 里 叶 级 数 的 一 部 分 , 它 依 希 尔 伯 特 空间 度量 趋 于 7. 由 此 推出 基 
(8.7) 趋 于 e**. 在 我 们 的 映射 中 ,ut"+9 对 应 于 Zr+k， 从 而 级 数 于 vnZnix 收敛 ， 
我 们 可 以 记 


十 oo 
Xk = Dn Zn (8.8) 
二 


四 除了 为 避免 对 当 r(z) = 7(z) = 0 时 r(z)/Y(z) 表示 什么 以 及 级 数 怎样 收敛 作 不 足 道 的 说 明 外 ， 
用 不 到 这 个 约束 . 
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因此 , 我 们 得 到 了 一 个 把 Xk 表示 为 由 不 相关 变量 Zi 组 成 的 平稳 序列 中 的 “移动 
平均 ”的 显 式 表达 式 . 

表达 式 (8.8) 显然 不 是 唯一 的 . 一 个 很 自然 的 问题 是 : 是 不 是 可 以 只 用 变 基 
2 了 -1 Zk-2，…( 表 示 “ 过 去 ”) 表示 Xk， 即 是 不 是 可 以 在 (8.3) 中 选取 这 样 的 
vv, 使 得 对 n > lz = 0? 这 个 问题 是 预报 理论 中 的 一 个 基本 问题 , 但 是 已 超出 本 
卷 书 的 范围 . 关于 典型 的 例子 , 见 3.7 节 (7.5) 和 习题 18. 
例 (b) 具有 不 相关 增 量 的 相伴 过 程 ， 对 于 满足 -x < t < xt 的 每 个 t, 把 wy 定义 
为 


wo) = { A (89) 


用 表示 5 中 的 相应 随机 变量 . 对 于 不 相交 的 区 间 来 说 , 增 量 半 一 的 协 方差 
显然 为 0, 而 且 Var(Yi) = 尽 全 元 对 . 于 是 {Yi} 是 一 个 具有 不 相关 增 量 且 方 差 由 及 
给 出 的 过 程 . 如 果 Xt 是 正 态 的 , 那么 过 程 7 的 增 量 实际 上 是 独立 的 . 

对 于 每 个 平稳 序列 {Xk}, 都 有 一 个 由 上 述 方式 得 到 的 具有 不 相关 增 量 的 相伴 
过 程 与 之 对 应 . 把 (8.9) 中 函数 % 展开 为 全 里 叶 级 数 ， 就 可 以 用 标准 方法 得 到 用 
Xk 表示 Yi 的 明显 表达 式 . 再 一 次 说 明 朝 相反 的 方向 上 进行 更 有 益 . 下 例 就 是 这 样 
做 的 . 
例 (c) ”随机 积分 . (正如 我 们 所 见 的 那样 ) 用 Xi 表示 一 个 随机 变量 7 的 表达 式 依 
赖 于 相应 于 U 的 函数 的 傅 里 叶 展 开 式 . 相反 , 用 变量 到 表示 的 下 述 表 达 式 似乎 太 
简单 了 . 它 涉及 到 了 函数 的 图 形 . 为 简单 起 见 , 我 们 假设 函数 是 连续 的 . 

首先 考虑 一 个 阶梯 函数 w, 即 一 个 形 如 

Ww = atyt 十 az(ye — Yai) + + an(Yr 一 gt (8.10) 

的 函数 ,其 中 ai 是 常数 ,x < < tb <… < tn-1l < 相伴 随机 变量 W 可 以 在 
这 个 表达 式 中 把 每 个 y; 换 成 Yi; 而 得 到 . 任 一 连续 函数 w 都 可 以 利用 形 如 (8.10) 
的 阶梯 函数 wm 一 致 地 逼近 . w(") 一 致 收敛 于 w 蕴含 依 区 的 范 数 收敛 ， 从 而 也 
蕴含 相应 的 随机 变量 WY 收敛 于 WW. 这 给 我 们 提供 了 一 个 通过 简单 的 极限 手续 
求 任 一 连续 函数 ww 的 像 W 的 方法 : 用 形 如 (8.10) 的 阶梯 函数 逼近 w, 并 把 yj 换 
为 Yiy. 记 住 (8.10) 是 一 个 函数 ， 而 不 是 一 个 数 , 正如 w0 的 极限 是 一 个 函数 而 
不 是 一 个 数 一 样 . 但 是 (8.10) 看 上 去 像 一 个 黎 曼 和 ,我们 的 程序 在 形式 上 使 人 想起 
黎 曼 积 分 的 定义 . 因此 ， 它 成 为 标准 的 作法 ， 人 们 通常 用 记号 


W= / ”ud (811) 


表示 上 述 极限 过 程 . 随机 变量 (8.11) 称 为 连续 函数 由 的 随机 积分 . 这 个 名 称 是 任意 
的 , 这 个 记号 只 是 我 们 已 严格 定义 的 极限 手续 的 一 个 简写 形式 . 由 定义 ,函数 em 
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对 应 于 随机 变量 Xn。， 从 而 我 们 可 以 记 
和 二 ] 7 emtdy;. (8.12) 


这 就 是 用 具有 不 相关 增 量 的 相伴 过 程 表 示 任 意 一 个 平稳 序列 {Xn} 的 谱 表 达 式 . 

与 其 说 随机 积分 的 记号 具有 逻辑 性 , 倒 不 如 说 它 具 有 启发 性 , 但 是 我 们 不 讨论 
这 种 用 法 . 我 们 的 目的 是 要 证 明 , 这 个 有 用 的 概念 和 重要 的 表达 式 (8.12) 可 以 通过 
传 里 叶 分 析 的 办 法 建立 起 来 . 这 就 说 明了 本 节 所 用 的 首先 由 克拉 美 引进 的 典型 映 
射 的 威力 . > 

这 个 理论 只 依赖 于 {Xn} 的 二 阶 矩 ， 并 且 实 际 上 只 有 在 这 些 矩 真正 有 意义 时 
才能 应 用 . 当 过 程 是 正 态 过 程 时 ,情况 就 是 这 样 . 因为 正 态 分 布 被 它们 的 协 方差 完 
全 确定 , 在 其 他 的 应 用 中 ,我们 可 以 相信 过 程 “ 与 一 个 正 态 过 程 差别 不 太 大 ”， 正 
如 在 最 古老 的 回归 分 析 中 人 们 相信 对 正 态 变 基 发 展 起 来 的 方法 是 普遍 可 用 的 一 样 . 
遗憾 的 是 , 仅仅 存在 一 个 优美 的 理论 绝 不 能 说 明 这 种 相信 是 有 理由 的 . 在 19.3 节 例 
(e) 中 过 程 的 样本 函数 是 严格 周期 函数 . 各 条 轨道 的 未 来 被 一 个 整 周期 的 数据 完全 
确定 , 但 是 以 L? 理论 为 基础 的 预报 理论 不 考虑 这 个 事实 , 它 把 所 有 的 过 程 和 同一 
谱 测 度 等 同 . 一 个 对 无 穷 序列 1, -1, 1, -1, … 作 了 长 时 间 的 观察 的 人 可 以 可 车 地 
预报 下 一 个 观察 值 , 但 是 L? 方法 使 他 预报 到 0 的 奇迹 般 的 出 现 . 这 个 例子 说 明 三 
方法 不 是 普通 可 用 的 , 但 它 是 讨论 正 态 过 程 的 理想 工具 . 


19.9 习 题 
1. 奇特 的 特征 函数 . 对 lz| <h 设 T(zZ)=1 一 |z|/h, 对 |z| > 天 设 m(z)= 0. 令 
+ 
Q(z)= 3) anm(z—n). (9.1) 


nm 一 oo 


当 on 是 实数 , h = 1 时， a 的 图 形 是 一 个 项 点 为 (n,an) 的 折线 . 当 及 < 时 ,a 的 图 
形 由 = 轴 上 的 小 有 和 顶点 为 (n,an) 的 等 腰 三 角形 的 腰 所 组 成 . 

利用 19.2 节 引 理 1 的 准则 证 明 : 如 果 an 是 实数 , 目 o_。 = an,|al| 十 laoz| 二 .…< 
jao, 那么 a(C)/a(0) 是 一 个 特征 函数 . 

(推广 ) 当 把 六 换 为 任意 一 个 偶 可 积 特征 函数 时 ， 上 题 的 陈述 仍然 成 立 ，( 利 用 15.2 节 
的 图 1 所 表示 的 特征 函数 ， 您 可 以 构造 一 个 具有 非常 离奇 的 折线 图 形 的 特征 冰 数 . ) 
( 续 ) 上 述 结果 是 下 列 结果 的 特殊 情形 ， 设 + 是 一 个 偶 可 积 特征 函数 ， 如 果 和 是 实 
数 ,oa 是 满足 盖 lan| < co 的 复 常数 , 那么 为 使 


» 


» 


a(O) = > orr(C 一 X) (9.2) 
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是 一 个 特征 函数 ， 当 且 仅 当 a(0) = 1, 且 对 于 所 有 的 4, 党 are-，” > 0. (实际 上 , 只 
要 上 一 级 数 是 阿 贝 尔 可 和 的 ， 且 和 为 一 个 正 函数 就 行 了 .) 


.为 使 (3.3) 中 所 定义 的 协 方差 函数 p 是 处 处 连续 的 ， 当 且 仅 当 它 在 原点 连续 . 为 使 情 


况 是 这 样 的 , 当 且 仅 当 t 一 0 时 E(X: 一 Xo)? 一 0. 


，( 差 商 与 导数 )， 设 {Xe} 是 一 个 平稳 过 程 ，p(t) = E(Xe+sXt) 且 谱 测度 为 R 对 于 


h> 0, 用 X = (Xeth 一 Xt)/h. 定义 一 个 新 过 程 . 

(a) 证 明 : 新 过 程 的 谱 测 度 RW 为 RY{dz} = 2h-?[1 一 coshz]R{dz}， 为 使 当 
h 一 0 时 协 方差 po (tb) 趋 于 一 个 极限 ， 当 且 仅 当 存 在 连续 的 二 阶 导数 p”(t)， 即 测度 
z?R{dz} 是 有 限 的 . 

(b) 在 后 一 情形 下 , 当 = 一 0, 5 一 0 时 , EX 一 XGOP) 一 0. 
注 利用 19.7 节 希 尔 伯 特 空间 的 术语 , 这 就 是 说 , 对 于 固定 的 t, 当 en 一 0 时 , 序列 
{Xf")} 是 一 个 柯 西 序列 ， 从 而 导数 X! =1im.X4 存在 . 


，( 见 19.4 节 定理 2) 如 果 除 了 在 原点 具有 跳跃 以 外 , p 是 连续 的 , 那么 在 原点 的 一 个 邻 


域外 一 致 的 有 f.(4) 一 9(6),， 并 且 万 (0) 一 ileo+) 一 92(0-)]. 


7.( 续 ) 如 果 9 是 两 个 单调 函数 之 差 , 那么 在 所 有 的 点 上 , 廊 (5) 一 jek+H) — (6—)]. 
8. 具有 非 负 傅 里 叶 系 数 pn 的 有 界 周期 函数 yp 一 定 是 连续 的 , 上 且 于 pn < co. pn = 1/n 


10. 


11. 


这 个 例子 表明 ,如果 只 假设 p 可 积 , 那么 这 个 结论 是 错误 的 . 提示 : 利用 19.4 节 定 理 
1 的 证 明 的 主要 思想 . 


， 切 萨 罗 (Cesaro) 可 和 性 . 把 (4.3) 换 为 


fr(6) = Dpnane™, 
其 中 对 于 In| < 2N, on = 1-|n|(2N 二 1) 对 于 |n| > 2N, an = 0. 证明: 如 果 把 P(t) 


换 成 
sin? (n+3): 
2N+1 2I 


gn(t) = > 
Sin at 


(这 也 是 一 个 概率 密度 ), 那么 19.4 节 的 理论 也 成 立 . 


( 续 ) 更 一 般 地 证 明 : 如 果 an 是 圆周 上 一 个 对 称 化 了 的 概率 密度 的 傅 里 叶 系数 ， 那 么 
19.4 节 的 理论 也 成 立 . 
利用 泊 松 求 和 公式 (5.2) 来 证 明 : 


冯 f( 天 于 中 Anf2 士 z 十 2kA 
< VE vi 

oo a 
a lm 0 
->on( 5 各 ) es Recon Ye, 


其 中 表示 标准 正 态 密度 . [这 是 10.5 节 例 (c) 中 反射 壁 问题 的 解 . ] 
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12. 在 泊 松 求 和 公式 (5.2) 中 ,5 p(C 二 2k 和) 收敛 于 连续 函数 划 这 个 条 件 可 以 换 为 于 (nry/ 
入 < oo. 提示 : % 在 任何 情形 下 都 是 可 积 函 数 . 利用 19.4 节 系 2. 

13. 泊 松 未 和 公式 的 另 一 种 推导 . 设 p 是 任意 一 个 概率 分 布 下 的 特征 函数 . 如 果 Pr 表示 
(4.5) 和 (4.7) 中 的 泊 松 核 , 证 明 (无 需 进 一 步 的 计算 ): 对 于 0<r <1， 


十 oo oo 
去  wC+nmrnlem = 大 ezP,(z + A)P{dz}. (9.3) 
园 此， 左边 是 一 个 特征 元 数 . 令 7 一 1， 证明: 如果 下 具有 一 个 密度 f， 那 么 当 
Tf(-A+2kn) < co 时 , 


去 3 pC+ne™ = > EA f(A + 2kn). (94) 
证 明 : (9.4) 等 价 于 求 和 公式 的 一 般 形式 (5.9). 
注 这 个 结果 可 以 重新 叙述 为 , 当 (9.4) 的 右边 连续 时 , 左边 是 阿 贝尔 可 和 的 ， 且 和 为 
右边 . 

14. 为 使 序列 {pn} 是 正定 的 , 当 且 仅 当 对 于 每 个 0 < r < 1, fpnri"I} 是 正定 的 . 充 要 条 件 
是 对 于 所 有 的 入 和 0<r < 1 wne"™ > 0. 

15. 由 习题 1 和 习题 14( 无 需 计算 ) 推导 下 述 (由 工 . 谢 帕 发 现 的 ) 定理 ; 设 {pn} 是 正定 的 ， 
用 a 表示 顶点 为 (n, pn) 的 分 段 线性 函数 , 那么 a 是 正定 的 . 

16. 设 p 是 一 个 特征 函数 ， 用 cx 表示 顶点 为 (n,p(n)) 的 分 段 线 线性 画 数 ， 那 么 a 是 一 个 
特征 函数 ， (这 只 是 重新 叙述 了 习题 15, 并 且 是 习题 1 当 h = 1 时 的 特殊 情形 .) 利用 
习题 1 的 其 他 情形 来 描述 可 由 w 得 到 的 其 他 奇特 的 特征 函数 . 

17. 如 果 r < 1, 那么 马尔 可 夫 序列 的 协 方差 pn = rinleine 满足 具有 下 列 wi 的 (7.20), 大 > 0 
时 , wk = VI 一 rrkeike; kk < 0 时 , uk = 0. 求 男 一 表达 式 . 

18，( 续 ) 设 {X，} 是 一 个 协 方差 为 pn = rl"le” 的 马尔 可 夫 序 列 . 如 果 r < 1， 那 么 我 
们 有 Xn = VI EE erz, 其 中 Zi 是 不 相关 的 . 如 果 r = 1， 那 么 我 们 有 
Xn = ei™ Zo0. 


20. 


21. 


习题 解答 
第 1 章 


9 4 的 ee-9/2 2 > 3. 


(ii) Fel 对 于 所 有 的 rz (iv) aeraz, rz > 0. 
0 0 er-az-ozt 


4 Yr 

as -az$ _ er-az-az 
(vi) ae + e+) 
0) i <1 GE 1<t<5. 
人) 工 记号 ) Iz| <2. 01 名 0<z<2. 
(了 -起 lz| < 1 了 十 3 二 下 +，|z| < 1. 
人 h-1(1 ~ ear), 0<z <h, jl(ee — 1)e-°r, z >h. 
(ii) h-1(1 ~e-e(s+h)), ~h<z<0, h-1(1 —e-oh)e-o, z > 0. 
人 h/3,h < 1;1/(3VR), h >1. (i) Vareie(1 — R(VafD)). 
()1-z-!, z>1. (i) z2(z + 1)-2. 


P{Z <z}=1-e-%, zr<t P{Z<7r}=1,7>t. 
(b) 车 队 随 汽车 一 起 前 进 , 组 成 一 个 样本 ， 其 中 最 小 元 素 位 于 最 后 一 个 位 置 ， 


第 2 小 元 素 位 于 最 后 第 2 个 位 置 . 
m—l i 
.p= en 对 于 m=Ln=2, 得 p= 
0 4 


nt"™-1 一 (mn — 1)t". 


1 1 
®2/ dz 人 (1 -2)dz = 
(i 密度 是 2t 一 (0 <t<1) 和 (2 一 t)?(1 < t<2). 
(证 ) 密度 是 22(0 <t<1) 和 (2 一 ?2(1 <t<2). 
1 
2/ Zz(L w)ds= 到 6 个 置换 中 每 2 个 都 相交 


1 1 1 于 1 
Xu :4m 五 ， 工 < 二; X12 和 Xol :4in2 2 < 3, 4n 了 <z< 天 
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9 
X22 : 4In4z, 工 3<z<, 4lnl, 了 <z<1 期 望 值 是 工 36’ 已， 16- 
27， 分布 是 2 Farcsin5 3 和 jz2; 密度 是 2 和 zx,0<z<2. 
28. pe 
一 了 2 
30. (Ini. bn 号 一， 其 中 0<z<1. 


四 
31. sf sin? 0d0 = s/ VIPay 
WW Jo<cose<r TJo 
=2n-![arcsinz +zV1i 一 23], 其 中 0<z<1. 
2 
32. F(t)= 3/ V (23) 0 — eos20)de. 


35， 代 换 s = (Gy) 把 积分 化 为 均匀 分 布 的 相应 积分 . 注意 , 对 于 小 的 z, F(m+z) 六 
了 + f(m)z. 


第 2 章 


ba 


grglz)= je-Ml1+ lol), 
ge 人) = 亩 e (3+ 3le| + 2), 
g*(7) = 让" (5 十 5lz| 十 2z2 十 3IzP). 
(a) 作为 2 个 指数 密度 的 卷 积 , 和 Ap(e-** 一 e+t)(y 一 入 ). 
(b) 利用 (a) 得 出 Xe 闪 . 
12， 对 于 随机 地 到 达 的 人 ,密度 是 1- 322(0 <t < 1) 和 了 (2-- 妇 (所 有 的 1 <t < 2)， 


呈 
S 


期 浊 值 等 于 1 
13. 人 
第 3 章 
7. (a) 对 于 z > 0,y > 0, 边缘 密度 是 e-”, 分 布 函数 是 1 一 e 一 e- 十 ezy. 
PPO= 全 全， 
人 的 = 元 人 + 下 a -& yr 
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12. 


13, 


15. 


16. 


17. 


20. 


21. 


如 果 f 有 期 望 值 k 和 方差 o?, 那么 E(X) = E(Y) = Bi Var(X) = Var(Y) = 


i! la 
3° + 本 ,Cov(X,Y) = 60 2A 


在 单位 正方 形 内 , 密度 是 2zz. 在 个 变量 时 , 密度 是 (n 一 1)!X2X3… Xn-?. 
ee >z>0) 和 Sor(y >zz<0). 当 y<z 时 , 把 z 和 y 交换 . 


(a) ‘ff 1 (EE,0<2<4 8/0 (Es) es 


其 中 0 < w < 了 <y<1, 并 且 积分 区 域 满足 条 件 2r <。< 于 和 1 一 2 < 


s<1-y. 


具有 方差 m,n 与 协 方差 V75 的 二 元 正太 密度 . 条 件 密度 具有 期 望 值 于: 与 


方差 m. 二 也 
n 


X?+… 十 X2 具 有 T 密度 [ 见 2.2 节 (2.2)]. 因此 , 由 (3.1) 有 


z) nil 3 


2 2 

对 于 m=2,n=4, 得 3.3 节 例 (a). 

(a) 47y， 当 z+y<lz>0y>0 时 ; 
dzy—4(z+y—1)?,， 当 z+y>1,0<z,y<1 时 ; 
47(2—z—Yy), 当 y>1,z+y<2,7>0 时 ; 
dy(2— Zz —Y), 当 z>1,z+y<2,y>0 时 . 

(b) 2(1 一 z 一 切 ?， 对 于 0<zy<lz+y<1l， 
2(1— 2)?, 对 于 z>0,y<0,z+y> 0. 
2(1 + 9)?, 对 于 z>0y<0z+y<0. 
对 于 z < 0 的 情况 , 可 由 对 称 性 得 出 . 

7 
2 十 (arccos -3 1 一 7): 


oo 2 
[ fdr [ g(Vr? + pp? 一 2rpcosb)db. 
0 0 


(a) Xn = U cos Ban +Vsin Ban. (b U+V(-1)"™. 


(c) Ucos Sn +Vsin Ban +W. 
(a) Var(Yn+1) — Var(Y¥n) = Var(Cn) — 2Cov(Yn, Cn) + 1, 
(bj oz — 2acp +1=0, 
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Oo=$(etd), =X t+ bp- od -qn)/p, 
其 中 g=1-p. 


22, 52 办 (e+ 二 ) +N- 
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11. 不 一 定 , 但 是 一 定 有 n[1 - F(e n)] 一 0. 
12， 对 于 z>0, 密度 是 1 和 Ba 一 e-2=). 
13， 4U(z) = 工 - qe-ze. 更 新 时 刻 的 个 数 总 是 几何 分 布 的 . 


19，2 = z+ 下 女 Z, 其 中 , 当 t<&《 时 z(t)=1-er, 当 t>€ 时 z(t)=z(6), 当 
t>€ 时 F(t)=e-<—e-ct. 


20，V = 4+ BV, 其 中 A{dz} = [1 一 G(z)]F{dz}. Bfdz} = G(z)F{dz}. 
23。 反正 下 密度 9() = 二 
第 7 章 
6 人 (wr 一 p", 并 且 王 集中 在 p 上 . 
人 ,密度 ftz) =1. 


2(k+ 1) 
(©) mr) 密度 2z. 
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